操作背景:
HDFS DataNode定义的存储目录不正确或HDFS的存储规划变化时,需要修改DataNode的存储目录,以保障HDFS的正常工作,假定我们现在对应的HDFS数据盘位置为:/hadoop/hdfs/data; 预将数据目录迁移至/data/hadoop/hdfs/data目录底下;
目前操作系统受影响情况:
1) 更改DataNode存储目录需要停止HDFS服务,在此期间集群无法正常对外提供服务
2)需要修改Ambari中HDFS中DataNode 对应的目录
操作步骤:
1)切换到hdfs 用户
su - hdfs
2)在HDFS客户端下,执行命令,以检查HDFS根目录下全部文件是否处于正常状态
hdfs fsck /
显示结果: The filesystem under path '/' is HEALTHY 为正常情况
3)更改DataNode存储目录
1:在Ambari Web 上,选择HDFS服务 -> 操作 -> 停止服务, 停止HDFS服务
2:以root用户登录到安装DataNode的服务器上,执行:
cd /hadoop/hdfs
mv data /data/hadoop/hdfs
3:在Ambari 管理界面, HDFS 配置部分 将 DataNode Directories 的配置修改成/data/hadoop/hdfs
4: 保存对应的配置
5:在Ambari 管理界面启动对应的HDFS服务
4)检查迁移后的HDFS数据健康状态
su - hdfs
hdfs fsck /