hadoop启动后通过jps查看进程datanode或namenode不存在问题解决

最近学习hadoop集群,在配置好集群文件通过start-all.sh启动hadoop,然后jps查看进程,正常情况下会看到
[root@master sbin]# jps
5694 SecondaryNameNode
6070 Jps
5384 NameNode
5527 DataNode
5848 ResourceManager
5952 NodeManager

以上进程是正常启动,在进行其他软件配置过程可能由于未知的误操作导致namenode无法启动,在使用hadoop namenode -format格式化namenode依然无法启动后,尝试修改hadoop–>hdfs–>name(data)文件(注:我的文件是这么存储的,name、data文件放在以上顺序的目录中),打开current,查看version中的clusterID,如果data和name中的两个ID不一样就修改相同,然后重启start-all.sh查看是否正常启动。
但是,并不是每个人到此都能解决这个问题,如果你的还没有正常启动,就删除name和data中的全部文件,然后hadoop namenode -format格式化namenode,然后重启hadoop验证是否解决问题。
总结:解决方法
1.hadoop namenode -format格式化后重启hadoop
2.修改每个DataNode的namespaceID(位于/hdfs/data/current/VERSION文件中)<优先>或修改NameNode的namespaceID(位于/hdfs/name/current/VERSION文件中),使其一致。
3.删除DataNode的所有资料(及将集群中每个datanode的/hdfs/data/current中的VERSION删掉,然后执行hadoop namenode -format重启集群,错误消失。<推荐>)

  • 14
    点赞
  • 60
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值