全部博文
-
编辑 删除
hadoop2.6 HA集群安装配置
.说明：1) 在hadoop2.0中通常由两个namenode组成，一个处于active状态，另一个处于standby状态。active namenode对外提供服务，而standby namenode则不对外提供服务，仅同步active namenode的状态，以便能够在它失败的快速进行切换。hadoop2.0提供两种hdfs ha的解决方案，一种是nfs，另一种是qjm。这里使用的是qjm。主备namenode之间通过一组journalnode同步元数据信息，一条数据只要成功写入多数journalnode即认为写入成功。通常配置奇数个journalnode。这里还配置了一个zookeeper集群，用于zkfc(DFSZKFailoverController)故障转移，当active namenode挂掉，会自动切换standby namenode为active状态。2) hadoop2.2.0中依然存在resourcemanager的单点故障问题，在hadoop2.4.1中解决了这个问题。有两个resourcemanger，一个是active，一个standby，状
