动态增加节点
1、在slaves中添加节点名称,然后source profile
2、手动刷新节点
hdfs dfsadmin -refreshNodes
3、启动DataNode即可
sbin/hadoop-daemon.sh start datanode
sbin/yarn-daemon.sh start nodemanager
动态删除节点(添加到黑名单)
1、在etc/hadoop下创建dfs.hosts.exclude文件,向其中添加节点名
2、在NameNode的hdfs-site.xml中增加dfs.hosts.exclude属性
<property>
<name>dfs.hosts.exclude</name>
<value>/opt/module/hadoop-2.7.7/etc/hadoop/dfs.hosts.exclude</value>
</property>
3、刷新NameNode和ResourceManger
hdfs dfsadmin -refreshNodes Refresh nodes successful
yarn rmadmin -refreshNodes