Java异步日志kafka_使用Log4j将程序日志实时写入Kafka（转）

很多应用程序使用Log4j记录日志，如何使用Kafka实时的收集与存储这些Log4j产生的日志呢？一种方案是使用其他组件(比如Flume，或者自己开发程序)实时监控这些日志文件，然后发送至Kafka。而另外一种比较便捷的方案是使用Kafka自带的Log4jAppender，在Log4j配置文件中进行相应的配置，即可完成将Log4j产生的日志实时发送至Kafka中。

本文以Kafka0.8.2为例，介绍KafkaLog4jAppender的配置方法：

log4j.properties文件内容如下：

log4j.rootLogger=INFO,console,KAFKA

## appender KAFKA

log4j.appender.KAFKA=kafka.producer.KafkaLog4jAppender

log4j.appender.KAFKA.topic=lxw1234

log4j.appender.KAFKA.brokerList=brokerNode1:9091,brokerNode2:9092

log4j.appender.KAFKA.compressionType=none

log4j.appender.KAFKA.syncSend=true

log4j.appender.KAFKA.layout=org.apache.log4j.PatternLayout

log4j.appender.KAFKA.layout.ConversionPattern=%d{yyyy-MM-dd HH:mm:ss}%-5p%c{1}:%L %%-%m%n

## appender console

log4j.appender.console=org.apache.log4j.Co