在长时间未使用的Hadoop集群重启时，遇到无法连接HDFS的问题，由于namenode启动时GC问题导致编辑日志重放失败。通过调整GC参数，成功重启namenode，但恢复过程缓慢。手动备份HDFS并尝试生成新的fsimage时，出现不一致的检查点错误，解决方法是删除hadoop.tmp.dir目录。参考Hortonworks社区的检查点指南完成修复。
集群有段时间没人用了，重新启动时遇到无法连接到hdfs问题
jps查看命令之后发现是namenode没有启动起来，查看hdfs的日志：
找到问题的原因了，在namenode启动过程中重放hdfs的edit log时爆掉了GC，Google了一下，发现可以修改GC参数：
export HADOOP_OPTS="-XX:-UseGCOverheadLimit重启启动namenode成功（中间恢复过程很慢很慢，跑到第二天早上，恢复失败。。。再次启动namenode又恢复成功了。。。还没明白原因。。）
最低0.47元/天 解锁文章
1023
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
