Kafka应用点滴（三）——Springboot集成Kafka之批量消息

最新推荐文章于 2024-09-20 09:52:00 发布

中年IT男

最新推荐文章于 2024-09-20 09:52:00 发布

阅读量804

点赞数 1

分类专栏： JAVA 文章标签： kafka

本文链接：https://blog.csdn.net/wy13523/article/details/105070530

版权

JAVA 专栏收录该内容

5 篇文章 0 订阅

订阅专栏

本文介绍如何在SpringBoot项目中使用Kafka进行批量消息消费。通过在配置文件application.properties中设置监听类型为BATCH，并调整消费者每次消费的消息数量，结合使用@KafkaListener注解，实现高效的消息处理。

摘要由CSDN通过智能技术生成

Springboot集成kafka，如何批量消费消息？其他教程均是采用spring-kafka的方式，即：

通过在配置class中setBatchListener(true)来实现

@Bean 
public KafkaListenerContainerFactory<?> batchFactory() {
    ConcurrentKafkaListenerContainerFactory<Integer, String> factory = new ConcurrentKafkaListenerContainerFactory<>(); 
    factory.setConsumerFactory(consumerFactory()); 
    factory.setBatchListener(true); // <<<<<<<<<<<<<<<<<<<<<<<<< return factory; 
}

但是实际似乎可以是在application.properties中通过设置：spring.kafka.listener.type=BATCH/SINGLE

spring.kafka.consumer.max-poll-records=5 #设置每次批量消费的消息条数

消费者代码：

@KafkaListener(id="C1",

topicPartitions= {@TopicPartition(topic = "acktest",partitions= "1")},

groupId = "group1")

public void receiveOne(List<ConsumerRecord<?, ?>> record,Consumer consumer) throws Exception {

    //System.out.println("The message one is :" + record.offset() + "-" + record.partition() + "-" + record.value());

    System.out.println("message size is " + record.size());

}