CDH6下线DataNode节点

1. 版本说明

我这里使用的是CDH6, 更高版本请参考 https://www.dandelioncloud.cn/article/details/1461114435854209026

2. 找到HDFS的实例

3. 解除授权

找到要下线的主机节点, 注意服务的名称, 一定要选择DataNode , 别选错服务
选择解除授权, 等待完成解除授权, 这个过程中千万不要中止, 很大概率会出现数据块丢失的问题!!!

4. 重启集群

解除授权完成之后, 按照系统的提示, 重启集群, 这时候也可以去查看NameNode UI中 关于DataNode节点的状态信息, 发现要下线的节点应该是正常下线成功了!

5. 注意事项

1. CDH6 比较特殊, 使用 dfs_host 排除节点的方式不生效
2. 直接使用解除授权即可下线, 但是解除过程中切记不要中止, 因为会发生数据块丢失的问题
3. 也不需要在命令行中使用 hdfs dfsadmin -refreshNodes 命令

欢迎大家留言一起讨论学习!