hadoop配置日志的聚集

方便用户在yarn上去查看日志

 

修改yarn-site.xml文件

添加如下配置

<!-- 开启日志聚集功能 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>
<name>yarn.log.server.url</name>
<value>http://hadoop102:19888/jobhistory/logs</value>
</property>
<!-- 设置日志保留时间为 7 天 -->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>604800</value>
</property>

分发配置到集群中的其他虚拟机

分发配置：创建xsync进行hadoop快速分发差异文件_你可以自己看的博客-CSDN博客

xsync etc/hadoop/yarn-site.xml

重启HistoryServer和yarn

mapred --daemon stop historyserver

mapred -daemon start historyserver

stop-yarn.sh

start-yarn.sh