Hadoop HA使用中遇到的坑

之前笔者一直用的一个master一个slave的集群,后来给笔记本加了个内存条后,加上开始学习zookeeper,开始频繁使用两个master,3个slave的高可用集群了。之前以为没有什么区别,但是使用中还是遇到了不少的小坑。1. 先说集群启动顺序 **配置好第一次启动:** 1.每个slave启动zookeeper服务,执行zkServer.sh start,jps可以
摘要由CSDN通过智能技术生成

之前笔者一直用的一个master一个slave的集群,后来给笔记本加了个内存条后,加上开始学习zookeeper,开始频繁使用两个master,3个slave的高可用集群了。之前以为没有什么区别,但是使用中还是遇到了不少的小坑。

1. 先说集群启动顺序

    **

配置好第一次启动:

**
1.每个slave启动zookeeper服务,执行zkServer.sh start,jps可以看到多了QuorumPeerMain进程
2.每个slave启动journalnode,执行hadoop-daemon.sh start journalnode,jps可以看到多了
JournalNode进程
3.格式化HDFS,在一个master上执行hdfs namenode -format,如果看到succesfully formated就表示成功了(注意不要重复格式化),然后将生成的tmp目录拷贝到backup master对应的目录下。`

        <property>
        <name>hadoop.tmp.dir</name>
        <value>/home/hadoop/hadoop-2.7.3/tmp</value>
        </property>

`
4.格式化ZKFC,在node1上执行hdfs zkfc -formatZK。(如果集群没有配置高可用的话,不需要错误恢复,所以也就不要格式化了)
5.启动HDFS,在master

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值