《Hadoop实战第2版》——2.4节安装和配置Hadoop集群

  • 时间:
  • 浏览:0
  • 来源:uu快3计划_uu快3官方_单双

2.4.1 网络拓扑

通常来说,另一个多多Hadoop的集群体系形状由两层网络拓扑组成,如图2-3所示。结合实际应用来看,每个机架中会有200~40台机器,哪此机器共享另一个多多1GB下行数率 的网络交换机。在所有的机架之上还有另一个多多核心交换机或路由器,通常来说其网络交换能力为1GB或更高。可不都可以 很明显地看出,同另一个多多机架中机器节点之间的下行数率 资源肯定要比不同机架中机器节点间充足。这也是Hadoop之后设计数据读写埋点策略要考虑的另一个多多重要因素。

2.4.2 定义集群拓扑

在实际应用中,为了使Hadoop集群获得更高的性能,读者需要配置集群,使Hadoop才能感知其所在的网络拓扑形状。当然,或者集群中机器数量很少且居于于另一个多多机架中,没办法 就不想做太久额外的工作;而当集群中居于多个机架时,就要使Hadoop清晰地知道每台机器所在的机架。