hadoop2.7集群搭建后,启动发现nameNode和nodeManger可以启动成功,dataNode启动不成功
到hadoop安装目录的/etc/hadoop/目录下查看 datanode日志,发现服务拒绝连接,一开始怀疑是ssh配置问题,重新删除了 .ssh目录,ssh-keygen-t rsa和 ssh-copy-id hadoop105重新生成公钥和密钥,仍不成功,仔细观察warning发现启动dfs后,有一个连接localhost节点的动作,可我的workers并没有配置这个localhost节点,网上找了一堆都是说去cd /etc/ssh/ssh_conf文件修改hostKeyChecking属性, 设置为no,修改后发现还是不行,只是没有了warning告警,问题还是存在。因为我是按照3.x的教程安装的,对比后发现2.x和3.x的集群节点配置文件不同。2.x为slaves 3.x为workers,如果不配置默认是localhost,即支持单机本地启动。 对应修改正确后,启动正常
截图如下所示:
根据使用的是hadoop2.x则修改slaves, hadoop3.x修改为workers。 所以这次变动是反对种族歧视的一种命名妥协吗