hadoop2.7.3 HA高可用集群安装

本文详细介绍了如何搭建Hadoop 2.7.3高可用(HA)集群,包括HDFS NameNode和ResourceManager的高可用设置,使用Zookeeper进行故障切换,并提供了详细的配置步骤和集群启动验证方法。
摘要由CSDN通过智能技术生成
  1. hadoop2.7.3 HA高可用集群安装
      1. HDFS高可用性(NameNode
          1. NN必须实现共享元数据才能保证无缝切换;共享元数据可以采用Linux提供的NFS服务,也可以使用Hadoop提供的JournalNodeJournalNode采用多数派理论,保证半数以上的节点写成功即认为成功。
          2. NN要实现自动切换(不需要手工切换),就必须实现实时监控每个节点的状态;这里采用DFSFailoverController进行监控,如果某个NN失败,其他NN能够通过ZK被通知到,并接替NN的任务。
      2. RM高可用性(ResourceManager
        1. ResourceManager 借助 zk 实现热备,当某个节点失效之后另一个节点能够被通知,并接管任务。
      3. Hadoop2.7.3 HA搭建步骤
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值