HDFS2.0 NameNode HA 切换失败后的恢复（元数据写坏）（2014.10.1编辑）

最新推荐文章于 2022-03-31 09:32:14 发布

WentaoMa

最新推荐文章于 2022-03-31 09:32:14 发布

阅读量7.7k

点赞数

分类专栏： hadoop分布式计算相关技术文章标签： Hadoop hdfs namenode

本文链接：https://blog.csdn.net/yu_fu/article/details/39177817

版权

在测试HDFS2.0的NameNode HA时，遇到切换失败并导致元数据损坏的问题。尝试了初始化共享编辑、同步NN元数据、删除错误的edits文件和调整seen_txid等方法，最终成功恢复NN。故障原因是JN在系统包更新后未能正确重启，导致加载新类异常。解决方案是避免随意重启JN，确保其独立维护。

摘要由CSDN通过智能技术生成

在测试 HDFS2.0 的 NameNode HA 的时候，并发put 700M的文件，然后 Kill 主 NN ；发现备 NN 切换后进程退出。

2014-09-03 11:34:27,221 FATAL org.apache.hadoop.hdfs.server.namenode.FSEditLog: Error: recoverUnfinalizedSegments failed for required journal (JournalAndStream(mgr=QJM to [10.136.149.96:8485, 10.136.149.97:8485, 10.136.149.99:8485], stream=null))
org.apache.hadoop.hdfs.qjournal.client.QuorumException: Got too many exceptions to achieve quorum size 2/3. 1 successful responses:
10.136.149.99:8485: null [success]
2 exceptions thrown:
10.136.149.97:8485: org/apache/hadoop/io/MD5Hash

然后重启 NN 两个 NN均失败，

怀疑是 JN 那里有问题，可能有垃圾产生，bin/hdfs namenode -initializeSharedEdits 启动NN ，还是失败

最低0.47元/天解锁文章

WentaoMa

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
HDFS2.0 NameNode HA 切换失败后的恢复（元数据写坏）（2014.10.1编辑）

在测试 HDFS2.0 的 NameNode HA 的时候，并发put 700M的文件，然后 Kill 主 NN ；发现备 NN 切换后进程退出。尝试了多种方法终于恢复，原因还在分析中。
复制链接

扫一扫

专栏目录