小松鼠的大笨熊博客

研究生生涯的知识积累,每天积累一点点,日日更新一丢丢

Hadoop集群启动后在网页无法看到DataNode信息

问题描述:node82作为namenode节点,node81,node80,node79作为datanode,jps显示都是启动的,可以登陆网页却看不到

                 datanode节点信息。

                

网页显示:

                         

              

各节点之间都可以ping


解决方案:
           

    1. 首先在Master上ping slave,发现都可以ping通,这是可以找到的

    2. 首先在slaves上ping Master,直接ping Master的hostname,发现根本没有办法ping 通,了解到 /etc/hosts里面的设置 

        有问题,发现里面Master的IP写错了,修改修改过来之后,重新运行,正常运行

如果不是这个问题,还有其他的解决方式

1. 查看NameNode的9000端口,(core-site.xml文件中的fs.default.name节点配置)端口是否打开,因为所有的DataNode都

    要通过这个端口连接NameNode

2. 关闭防火墙,因为防火墙可能会阻止其他的电脑连接。使用以下命令关闭防火墙

      service iptables stop


还有一种情况就是各个datanode节点中的hadoop/etc/hadoop/hdfs-site.xml中的dfs.datanode.data.dir设置的名称是一样的

造成了报告中误认为只有一个datanode!

所以删除各节点下的hadoop/hadoop_data/hdfs/datanode,新建和节点对应的datanode文件夹

再修改好对应的hdfs-site.xml文件





阅读更多
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

不良信息举报

Hadoop集群启动后在网页无法看到DataNode信息

最多只允许输入30个字

加入CSDN,享受更精准的内容推荐,与500万程序员共同成长!
关闭
关闭