Hadoop3.1.3配置日志聚集

1、编辑yarn-site.xml

vim yarn-site.xml

在该文件里面增加如下配置。

<!-- 开启日志聚集功能 -->
<property>
    <name>yarn.log-aggregation-enable</name>
    <value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>  
    <name>yarn.log.server.url</name>  
    <value>http://hadoop102:19888/jobhistory/logs</value>
</property>
<!-- 设置日志保留时间为7天 -->
<property>
    <name>yarn.log-aggregation.retain-seconds</name>
    <value>604800</value>
</property>

2、分发配置

xsync yarn-site.xml

3、在hadoop102停止历史服务器

mapred --daemon stop historyserver

4、在hadoop103重启yarn

sbin/stop-yarn.sh
sbin/start-yarn.sh

5、在hadoop102开启历史服务器

mapred --daemon start historyserver

6、执行wordcount,输出到/output2

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /input /output2

7、结果