hadoop
楼下着火了
每天积累一点点
展开
-
hadoop使用yarn执行MapReduce时, 一直卡在mapreduce.Job: Running job
做下笔记以后可能用到。在初次配置完yarn,然后执行MapReduce时,总是不成功,但jps发现前面的工作,resourceManager和nodeManager都成功启动。于是查询了下resourceManager的日志,发现有报错。我查看完发现,原因是配置的服务器地址链接不上。我最开始没注意这个ip,先去检查了下yarn-site.xml,发现我配置的是hadoop134,于是我进行了...原创 2019-05-30 14:28:02 · 1570 阅读 · 0 评论 -
hadoop启动namenode后,jps找不到对应进程
这个问题查了下,原因有很多,我本次也遇到了该问题,记录下以后回头查。问题描述:启动namenode第一次启动失败,第二次成功,第二次后可以jps查找到namenode。但启动datanode后,jps只有一个datanode,找不到namenode。解决思路:去hadoop安装路径下的log文件夹内,找到对应的namenode的log文件,查看原因。问题解决:我发现日志提示的问题是端口被占用...原创 2019-05-29 15:21:24 · 2821 阅读 · 0 评论