Kafka 接收消息 at least once

最新推荐文章于 2024-07-12 11:20:26 发布

shangboerds

最新推荐文章于 2024-07-12 11:20:26 发布

阅读量5.6k

点赞数

分类专栏： Kafka

本文链接：https://blog.csdn.net/shangboerds/article/details/80685238

版权

本文介绍了如何在Kafka中实现at least once消息接收，通过手动提交offset展示其实现方式，并指出该方法存在的消息重复处理问题。为解决此问题，提出了消息处理需具备幂等性或结合数据库事务存储offset的解决方案。

摘要由CSDN通过智能技术生成

– Start

点击此处观看本系列配套视频

首先启动 ZooKeeper 和 Kafka borker。
下面的例子演示了如何接收数据以及手动提交 offset。

package shangbo.kafka.example5;

import java.util.Arrays;
import java.util.Properties;

import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;

public class App {
	public static void main(String[] args) {
		Properties props = new Properties();
	     props.put("bootstrap.servers", "localhost:9092");
	     props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
	     props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
	     props.put("