hadoop之jobhistory

最新推荐文章于 2023-04-13 12:34:05 发布

宝哥大数据

最新推荐文章于 2023-04-13 12:34:05 发布

阅读量2.8k

点赞数

分类专栏： # Hadoop 文章标签： hadoop jobhistory

本文链接：https://blog.csdn.net/wuxintdrh/article/details/53239787

版权

Hadoop 专栏收录该内容

33 篇文章 0 订阅

订阅专栏

mapred-site.xml中的jobhistory相关配置参数的参数含义
mapreduce.jobhistory.address
mapreduce.jobhistory.webapp.address
这里写图片描述
1、14/04/04 17:32:35 INFO ipc.Client: Retrying connect to server: 0.0.0.0/0.0.0.0:10020. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1 SECONDS)
原因：这个问题是由于没有启动historyserver引起的，解决办法：
在mapred-site.xml配置文件中添加：

<property>  
        <name>mapreduce.jobhistory.address</name>  
        <value>TEST:10020</value>  
        //TEST 主机名
</property>

在namenode上执行命令：mr-jobhistory-daemon.sh start historyserver
这样在namenode上会启动JobHistoryServer服务，可以在historyserver的日志中查看运行情况。
启动jobHistoryServer:

[chb@TEST hadoop]$ ./sbin/mr-jobhistory-daemon.sh start historyserver
starting historyserver, logging to /usr/local/hadoop/logs/mapred-chb-historyserver-TEST.out
[chb@TEST hadoop]$