Hadoop HA模式升级配置

打怪的蚂蚁

于 2017-05-16 16:37:15 发布

阅读量1.2k

点赞数

分类专栏：大数据环境

本文链接：https://blog.csdn.net/xgjianstart/article/details/72300270

版权

本文档详细介绍了如何将Hadoop集群从非HA模式升级到HA模式，涉及配置包括zookeeper集群设置、namenode节点配置、journalnode启动、数据同步及验证HA状态等步骤。确保在ubuntu07和ubuntu08两台节点上正确设置，实现高可用性。

摘要由CSDN通过智能技术生成

这里仅以两台机器作为参考，配置HA模式，文档中所使用的的zookeeper集群也为ubuntu07和ubuntu08两台节点，实际生产环境建议使用奇数节点。ubuntu07和ubuntu08均配置为namenode节点，其中一台处于standby状态，两台节点均作为datanode节点。

1.1 使用如下命令停止非HA模式下的Hadoop所有进程

stop-all.sh

1.2 修改所有节点的core-site.xml文件（或者在某个节点上修改后分发给各个节点）
删除fs.default.name的配置，新增如下配置，根据具体环境配置，新增fs.defaultFS 和ha.zookeeper.quorum配置，配置内容为zookeeper集群的服务（zookeeper集群必须为奇数节点）：

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://bigdata</value>
</property>
<property>
<name>ha.zookeeper.quorum</name>
<value>ubuntu07:2181,ubuntu08:2181<