hadoop集群启动唯独缺少DataNode进程的解决方法

项目场景:

当Hadoop因为各种原因导致需要快照或重新配置,进入到最后一步格式化过后,开启集群发现主机进程一切正常,从节点其他进程也都有,唯独datanode进程没有的情况。

主机启动集群显示一切正常,主机的进程也全部出来,如图所示

 


但是从节点,例如我的2到4从节点,拿第二个从节点的图来看,进程除了datanode,都是正常的

 

 


原因分析:

可能是因为两次甚至多次的格式化导致的


解决方案:

我们可以找到datanode的资料,VERSION文件,然后把所有用到datanode进程的节点上面的VERSION都删除,再在主机上重新进行格式化,再次使用jps,datanode进程就可以出来了。

 因为每个人的Hadoop放在不同文件,所以根据自己的配置文件所放的地方,去寻找version文件,我的Hadoop放在opt文件下面,所以我在opt下面去找

 在xshell中去到VERSIONWEN文件所在的地址使用rm命令把VERSION文件删除,注意:

所有要用到datanode的从节点都要删除(拿完全分布来说,除了主机都要删除)下图是从节点删除VERSION文件后,主机已经重新格式化后,开启集群,使用jps的丛节点截图

 

 总结:解决步骤

1.找到datanode有关资料文件的存放地址

2.把需要用到datanode进程的节点上的VERSION文件删除

3.对主机重新进行格式化,开启集群,jps命令查看是否解决问题(注意格式化需要谨慎,建议先快照)

  • 4
    点赞
  • 30
    收藏
    觉得还不错? 一键收藏
  • 4
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值