Hadoop log4j日志说明

最新推荐文章于 2024-01-29 23:05:30 发布

用心工作-快乐生活

最新推荐文章于 2024-01-29 23:05:30 发布

阅读量9.6k

点赞数 3

分类专栏： Hadoop 文章标签： hadoop日志 hadoop log4j

本文链接：https://blog.csdn.net/bingjie1217/article/details/17604833

版权

本文详细介绍了如何自定义Hadoop DFSClient的日志，包括修改`log4j.properties`文件设置日志级别，定义输出到指定文件，以及在DFSClient中添加自定义日志记录，确保在读取HDFS数据时，能记录读取的blockID。

摘要由CSDN通过智能技术生成

log4j.propertites

# Define some default values that can be overridden by system properties
hadoop.root.logger=INFO,console
hadoop.log.dir=.
hadoop.log.file=hadoop.log

#
# Job Summary Appender 
#
# Use following logger to send summary to separate file defined by 
# hadoop.mapreduce.jobsummary.log.file rolled daily:
# hadoop.mapreduce.jobsummary.logger=INFO,JSA
# 
hadoop.mapreduce.jobsummary.logger=${hadoop.root.logger}
hadoop.mapreduce.jobsummary.log.file=hadoop-mapreduce.jobsummary.log

# Define the root logger to the system property "hadoop.root.logger".
log4j.rootLogger=${hadoop.root.logger}, EventCounter

# Logging Threshold
log4j.threshhold=ALL

#
# Daily Rolling File Appender
#

log4j.appender.DRFA=org.apache.log4j.DailyRollingFileAppender
log4j.appender.DRFA.File=${hadoop.log.dir}/${hadoop.log.file}

# Rollver at midnight
log4j.appender.DRFA.DatePattern=.yyyy-MM-dd

#