【Bugs】hdaoop结点启动：ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Bl

最新推荐文章于 2023-07-03 22:41:28 发布

系'辞

最新推荐文章于 2023-07-03 22:41:28 发布

阅读量504

点赞数

分类专栏：工具箱阿里云服务器部署文章标签： hadoop hdfs bug 大数据

本文链接：https://blog.csdn.net/qq_41653564/article/details/115497532

版权

在全分布式的Hadoop环境中，尽管DataNode进程正常启动，但在Web UI上未显示DataNode节点。问题并非由/etc/hosts的配置引起，因为服务器间可以互相SSH通信。解决方案涉及在hdfs-site.xml中添加属性以关闭DataNode对NameNode的注册检查。此外，了解到“Block pool”和“Uuid”是HDFS中用于标识的术语。

摘要由CSDN通过智能技术生成

鸣谢——核心参考：

1.【Hadoop故障处理】全分布下，DataNode进程正常启动，但是网页上不显示，并且DataNode节点为空

问题描述:

【说明】分布式hadoop环境下，DataNode进程正常启动，但是但是hadoop的UI网页上显示DataNode节点为空

【说明】/etc/hosts 的ip和hostname配置正常，因为各服务器端ssh能互相ping通。

2021-04-07 21:26:35,038 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool BP-1099985047-172.16.1.8-1617801344748 (Datanode Uuid 1d8cb265-ad8b-4f87-a684-04b42da47e06) service to /172.16.1.8:9000 Datanode denied communication with namenode because hostname cannot be resolved (ip=172.16.1.9, hostname=172.16.1.9): DatanodeRegistration(0.0.0.0