12.Hadoop_入门_日志聚集功能配置

日志聚集功能配置

日志聚集概念：应用运行完成以后，将程序运行日志信息上传到 HDFS 系统上。
日志聚集功能好处：可以方便的查看到程序运行详情，方便开发调试。

---

提示：开启日志聚集功能具体步骤如下：

1.配置 yarn-site.xml

vim yarn-site.xml

插入以下代码：

<!-- 开启日志聚集功能 -->
<property>
	<name>yarn.log-aggregation-enable</name>
	<value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>
	<name>yarn.log.server.url</name>
	<value>http://hadoop102:19888/jobhistory/logs</value>
</property>
<!-- 设置日志保留时间为 7 天 -->
<property>
	<name>yarn.log-aggregation.retain-seconds</name>
	<value>604800</value>
</property>

2.分发配置

xsync yarn-site.xml

3.关闭 NodeManager 、ResourceManager 和 HistoryServer

(1)在Hadoop103停止yarn.sh

sbin/stop-yarn.sh

(2)在Hadoop102关闭HistoryServer

mapred --daemon stop historyserver

4.启动 NodeManager 、ResourceManage 和 HistoryServer

(1)在Hadoop103启动yarn.sh

start-yarn.sh

(2)在Hadoop102启动HistoryServer

mapred --daemon start historyserver

---

总结

以上就是今天要讲的内容。