hadoop集群跑了很多的任务后
在hadoop.log.dir 目录下会产生大量的日志文件。
可以通过配置core-site.xml 文件让集群自动清除日志文件:
<property>
<name>hadoop.logfile.size</name>
<value>10000000</value>
<description>The max size of each log file</description>
</property>
<property>
<name>hadoop.logfile.count</name>
<value>10</value>
<description>The max number of log files</description>
</property>
本文介绍如何通过配置Hadoop的core-site.xml文件来自动清理Hadoop集群产生的大量日志文件。具体包括设置单个日志文件的最大大小及日志文件的最大数量。
3万+

被折叠的 条评论
为什么被折叠?



