最近工作用到了kafka,之前只接触过ActiveMQ,简单记录一下入门用法。
只是最简单的结合springboot使用,中间件还要慢慢深入学习。
首先是版本问题,困了我好久,下面是我测试了能用的版本:
Spring boot 版本 1.5.8.RELEASE
spring-kafka 版本 1.2.1.RELEASE
1.引入依赖
<dependency>
<groupId>org.springframework.kafka</groupId>
<artifactId>spring-kafka</artifactId>
<version>1.2.1.RELEASE</version>
</dependency>
2.配置文件
#============== kafka ===================
# 指定kafka 代理地址,可以多个
spring.kafka.bootstrap-servers=localhost:9092
#=============== 生产者 =======================
spring.kafka.producer.retries=0
# 每次批量发送消息的数量
spring.kafka.producer.batch-size=16384
spring.kafka.producer.buffer-memory=33554432
# 指定消息key和消息体的编解码方式 UTF-8
spring.kafka.producer.key-serializer=org.apache.kafka.common.serialization.StringSerializer
spring.kafka.producer.value-serializer=org.apache.kafka.common.serialization.StringSerializer
#=============== 消费者 =======================
spring.kafka.consumer.group-id=ceshi
3.生产者
@Component
public class KafkaSender {
@Autowired
private KafkaTemplate<String, String> kafkaTemplate;
public void sendMsg(String topicName, String jsonData) {
kafkaTemplate.send(topicName, jsonData);
}
}
直接调用sendMsg() 传入topic名称 和 消息内容 就可以发送消息了。
4.消费者
@Component
public class Consumer {
@KafkaListener(topics = { "test","test2"},group = "ceshi")
public void processMessage(String content) {
System.out.println("消费者收到:" + content);
}
}
使用注解设置监听的topic后,就可以接收到消息了,可以设置监听多个topic
另外,注解中的 group属性,是设置消费者属于的组名,被设置了相同组名的消费者,监控同一个topic 时 ,消息被一个消费者消费了,其他的消费者就消费不到了。
理论上是这样,但我使用中,注解中设置的group并没有生效,而是统一按配置文件中(上面配置部分最后一行)的group为准,所有消费者都被设置成了同一组,我去掉配置文件中的group配置,只在注解中写group,项目启动就会报错,很尴尬。
如果一定要为消费者分组,我也在网上找到一个解决办法,链接:https://blog.csdn.net/caijiapeng0102/article/details/80765923