kafka 批处理

最新推荐文章于 2024-09-18 14:35:54 发布

a494567309

最新推荐文章于 2024-09-18 14:35:54 发布

阅读量2.2k

点赞数

分类专栏： java springcloud springboot 文章标签： kafka

本文链接：https://blog.csdn.net/a494567309/article/details/103972956

版权

本文介绍了在阿里云Kafka实例上进行批处理的配置与方法。使用批处理可以提高消费效率，通过设置`group-id`、`auto-offset-reset`等参数，一次性获取并处理100条消息，提升系统性能。

摘要由CSDN通过智能技术生成

一环境：

1.kafka使用的是阿里云的消息队列kafka实例。

2.两台kafka消费服务器。

3.每天大概有50w次kafka发送消费。

--------------------------------------------------------------------------------

1.使用kafka批处理配置 factory.setBatchListener(true);

2.然后kafka的接受方法需要这么写：

	@KafkaListener(topics = "你的topic", containerFactory = "kafkaListenerContainerFactory", topicPartitions = {
				@TopicPartition(partitions = {"0","1"}, topic = "你的topic") })
	    public  void  message(List<ConsumerRecord<String, Object>> records,Acknowledgment ack){
                    if (!records.isEmpty()) {
			for (ConsumerRecord<String, Object> record : records) {
				if(null!=record&&record