hadoop
arsenal04
这个作者很懒,什么都没留下…
展开
-
hadoop no xxxx to stop的原因和解决方法
hadoop 2.4.1 使用sbin/stop-all.sh时候报错 no namenode to stop no resourcemanager to stop等错误jps查看发现进程并未关闭。网上参考资料,总结发现是默认hadoop pid文件是存放在/tmp内,但tmp 每10天会被清理一次。解决的方法是kill掉对应的进程修改 hadoop-env.sh中 pid原创 2015-03-05 16:18:30 · 1469 阅读 · 0 评论 -
hadoop 运维问题汇总(持续更新中)
1. hadoop 2.4 运行mapreduce 报10020端口拒绝连接,是因为jobhistory进程未启动,需要手动到sbin/mr-jobhistory-daemon.sh start historyserver2. hadoop 2.4 运行时发现文件无法读取,safemode in on 可通过 bin/hdfs dfsadmin -safemode get 获取原创 2015-03-06 15:14:04 · 561 阅读 · 0 评论 -
hadoop JOB错误日志查找
到hadoop的cluster页面找到 application,如 application_1438588979245_0136,点击进入cluster/app/application_1438588979245_0136点击History出现地址http://server3:xxxx/jobhistory/job/job_1438588979245_0原创 2015-08-13 10:17:51 · 1810 阅读 · 0 评论 -
hadoop windows下调试报错的分析org.apache.hadoop.io.nativeio.NativeIO$Windows
升级了服务器上hadoop版本到2.7.2,原来是2.4.1,响应的修改了pom.xml的hadoop版本。本地运行时出现如下错误:java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)V原创 2016-03-24 17:14:23 · 11464 阅读 · 6 评论