最近要摘除节点上的一些硬盘,主要需要注意一下几点:
1. 查看namenode管理页面上的Number of Under-Replicated Blocks个数是否为零,如果为零,尽量不要摘除硬盘,很容易丢数据。
2.修改Hadoop安装目录中etc/hadoop/下的两个文件:dfs_hosts_allow.txt ,dfs_hosts_exclude.txt。从allow文件中摘除节点信息,在exclude文件中增加节点信息。
3.运行命令hdfs dfsadmin -refreshNodes,将节点摘除。
4.在hdfs-site.xml文件中硬盘摘除。
5.将dfs_hosts_allow.txt 和dfs_hosts_exclude.txt文件恢复。
6.运行命令hdfs dfsadmin -refreshNodes。
7.将节点重启。