hadoop聚合日志配置详解

日志聚合作用：

• 将我们操作的日志文件聚合到一起，通过web界面方便我们查看，并可以设置日志保存时间，可节省空间
• 在网页能够查看map和reduce的任务日志
• 存储在HDFS上的，比较容易读取

配置文件：yarn-site.xml

<configuration>
<!--虚拟机名称（Master01），copy时注意修改-->
<property>
<name>yarn.resourcemanager.hostname</name>
<value>Master01</value>
</property>
<!--定义的mapreduce的shuffle-->
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
<!--开启日志聚合功能-->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>
<!--指定日志保存时间（单位为秒）-->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>86400</value>
</property>
<!--日志存放目录-->
<property>
<name&