- hadoop2.7.3 HA高可用集群安装
-
- HDFS高可用性(NameNode)
-
-
- NN必须实现共享元数据才能保证无缝切换;共享元数据可以采用Linux提供的NFS服务,也可以使用Hadoop提供的JournalNode;JournalNode采用多数派理论,保证半数以上的节点写成功即认为成功。
- NN要实现自动切换(不需要手工切换),就必须实现实时监控每个节点的状态;这里采用DFSFailoverController进行监控,如果某个NN失败,其他NN能够通过ZK被通知到,并接替NN的任务。
- RM高可用性(ResourceManager)
-
-
ResourceManager
借助
zk
实现热备,当某个节点失效之后另一个节点能够被通知,并接管任务。
- Hadoop2.7.3 HA搭建步骤
-
-