最近在单位做了一个需求,需要使用将一些接口信息发送到kafka消息队列。这个需求存在两个痛点,首先是项目比较老,目前还在使用的还是jdk1.6的版本,其次是技术栈比较封锁,是公司自己开发的框架,且时间比较急。思来想去给出这个需求的解决方案为:使用log4j发送消息,减少编码量,且和公司技术栈统一。由于目前网上能查到的基于jdk1.6通过log4j发送kafka消息的资料不多,所以在这里一起同大家分享。
需要引入的jar包为:
- guava-18.0.jar
- kafka_2.9.2-0.8.2.1.jar
- kafka-clients-0.8.2.1.jar
- scala-library-1.0.0.jar
- tradestats-1.0.0.jar
log4j.xml编码:
<appender name="kafka" class = "kafka.producer.KadkaLog4jAppender">
<param name = "topic" value = "cosp1">
<param name = "brokerList" value = "ip:port,ip:port,ip:port">
<param name="compressionType" value="none">
<param name="syncSend" value="true">
<layout class="org.apache.log4j.PatternLayout">
<param name="ConversionPattern" value="%m%n">
</layout>
</appender>
<logger name="com.XXX.xxx.handler">
<level value="info"/>
<appender-ref ref="kafka">
</logger>
使用:
logger.info(json)
经测试发现syncSend设置为false时不起作用,建议自行实现异步发送或者升级版本。