超详细Hadoop高可用安装(完结篇)

本文详述了Hadoop高可用集群的安装步骤,包括启动journalnode以实现namenode间的数据同步,namenode和zkfc的格式化,集群的启动,MapReduce的配置,以及节点间的密钥分发。通过这些步骤,确保了Hadoop集群的稳定运行和高可用性。
摘要由CSDN通过智能技术生成

前面完成了zookeeper的安装,接下来启动journalnode。
之所以要启动journalnode的原因是为了使两台namenode间完成数据同步

一、启动journalnode

1.在node01、02、03三台机子上分别把journalnode启动起来,输入下面命令:

hadoop-daemon.sh start journalnod

2.用jps命令检查journalnode是否启动
在这里插入图片描述

二、格式化namenode

1.在node01上执行下面命令

hdfs namenode –format

2.格式化完成后,启动node01的namenode,输入
hadoop-daemon.sh start namenode

3.同步node02,在node02上输入命令

hdfs namenode -bootstrapStandby

三、格式化zkfc

1.输入命令

hdfs zkfc -formatZK

2.查看hadoop-ha是否打开,输入命令

zkChli.sh
ls /

在这里插入图片描述

四、启动集群

1.输入下面命令启动集群

start-dfs.sh

在这里插入图片描述
2.在全部会话下输入jps查看启动了什么进程
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述
3.用浏览器去访问node01:50070和node02:50070
在这里插入图片描述
在这里插入图片描述
4.出现上面的页面后说明配置成功了,接下来关闭集群和zookeeper

stop-dfs.sh 
zkServer.sh stop

下次启动后就无须开启journalnode了

五、为MapReduce做准备</

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值