![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 75
qq_30136589
这个作者很懒,什么都没留下…
展开
-
Hadoop 2.6.0集群搭建(伪分布式+分布式)
详细总结了hadoop伪分布式集群搭建、分布式集群搭建、以及搭建时遇到的一些问题。原创 2016-06-11 20:29:58 · 464 阅读 · 0 评论 -
bug:datanode启动后立刻死掉:java.io.IOException: Incompatible clusterIDs in....
错误描述: 搭建伪分布式hadoop时,format namenode之后,start-dfs.sh启动hdfs,jps发现datanode启动后不久就自动死掉了。在日志文件:/usr/local/hadoop/hadoop-2.6.0/logs/hadoop-liuxianfa-datanode-liuxianfa8.out中看到如下报错信息。上网查了一下,发现了解决办法如下。原创 2016-06-11 21:02:03 · 2863 阅读 · 0 评论 -
bug:ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint
hadoop.tmp.dir配置参数指定hdfs的默认临时路径,这个最好配置,如果在新增节点或者其他情况下莫名其妙的DataNode启动不了,就删除此文件中的tmp目录即可。不过如果删除了NameNode机器的此目录,那么就需要重新执行NameNode格式化的命令。(我觉得这其实就是因为上面那个原因造成的。按照上面那个第二个方法去做就行了。)原创 2016-06-11 21:04:27 · 4968 阅读 · 0 评论 -
bug:配置secondarynamenode && 斯塔尼亚聊天记录
secondary namenoded 配置很容易被忽视,如果jps检查都正常,大家通常不会太关心,除非namenode发生问题的时候,才会想起还有个secondary namenode原创 2016-06-11 21:07:27 · 391 阅读 · 0 评论