- 修改IP和主机名称
- 增加新节点的ssh免密登陆
- 删除原来 HDFS 文件系统留存的文件/opt/module/hadoop-2.7.6/data删除原来 HDFS 文件系统留存的文件/opt/module/hadoop-2.7.6/data
- 在namenode的etc/hadoop下添加 dfs.hosts文件
- vim dfs.hosts
-
添加如下主机名称(包含新服役的节点)
hadoop101
hadoop102
hadoop103
hadoop104
-
在namenode的hdfs-site.xml文件添加
<property>
<name>dfs.hosts</name>
<value>/opt/module/hadoop-2.7.2/etc/hadoop/dfs.hosts</value>
</property>
-
刷新namenode节点
-
hdfs dfsadmin -refreshNodes
-
-
刷新resourcemanager节点
-
yarn rmadmin -refreshNodes
-
-
单独启动新节点上的datanode和nodemanager进程
-
hadoop-daemon.sh start datanode
-
yarn-daemon.sh start nodemanager
-
-
在web UI上进行查看
-
使用start-balancer.sh使得集群进行平衡
Hadoop集群服役新节点
最新推荐文章于 2023-03-13 15:42:40 发布