CDH中NameNode启动报错一例问题的处理

最新推荐文章于 2020-12-07 18:34:10 发布

BabyFish13

最新推荐文章于 2020-12-07 18:34:10 发布

阅读量7k

点赞数 4

分类专栏： CDH 文章标签： CDH big data cloudera hadoop namenode

本文链接：https://blog.csdn.net/BabyFish13/article/details/52786596

版权

CDH 专栏收录该内容

8 篇文章 0 订阅

订阅专栏

错误明细：

Failed to start namenode.
java.io.IOException: There appears to be a gap in the edit log.  We expected txid 693082, but got txid 693668.
	at org.apache.hadoop.hdfs.server.namenode.MetaRecoveryContext.editLogLoaderPrompt(MetaRecoveryContext.java:94)
	at org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadEditRecords(FSEditLogLoader.java:212)
	at org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadFSEdits(FSEditLogLoader.java:140)
	at org.apache.hadoop.hdfs.server.namenode.FSImage.loadEdits(FSImage.java:846)
	at org.apache.hadoop.hdfs.server.namenode.FSImage.loadFSImage(FSImage.java:701)
	at org.apache.hadoop.hdfs.server.namenode.FSImage.recoverTransitionRead(FSImage.java:292)
	at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.loadFSImage(FSNamesystem.java:1063)
	at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.loadFromDisk(FSNamesystem.java:767)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.loadNamesystem(NameNode.java:609)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:670)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.<init>(NameNode.java:838)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.<init>(NameNode.java:817)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1538)
	at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1606)

错误原因：
原因是namenode元数据被破坏了，需要修复。

解决办法：
输入命令： hadoop namenode -recover
全都选择 ‘c’ 即可

事件回顾：
由于机房漏水等原因，导致CDH的namenode standby节点及datanode的两个节点挂掉，且恢复不了。所以，在CDH原集群上需要重新配置，以满足新的环境情况。
首先，将坏掉的机器从集群中删除，然后重新配置了namenode角色，然后启动的时候出现了此问题。
实际处理过程中，可能有更好的方案，探索中。