Kafka消息顺序保证

Kafka可以保证同一个分区里的消息是有序的。生产者按照一定的顺序发送消息,broker会按照这个顺序将消息写入分区的批次缓存中,消费者也会按照同样的顺序读取它们。

如果把retries设置为非零整数,同时把max.in.flight.requests.per.connection设置为大于1的整数,那么,如果第一个批次写入消息失败,而第二个批次写入消息成功,broker会重试写入第一个批次。如果此时第一个批次也写入成功,那么这两个批次的顺序就会跟生产者发送的顺序相反。如果对消息写入顺序有要求,那么可以把max.in.flight.requests.per.connection设置为1,这样生产者在尝试发送第一个批次的消息时,就不会有其他的消息发送给broker,但是吞吐量会下降。

max.in.flight.requests.per.connection:该参数指定了生产者在收到服务器响应之前可以发送多少批次的消息。它的值越高,占用的内存越多,不过也会提高吞吐量。

  • 2
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Kafka保证消息顺序性有多种方法。首先,Kafka只能保证单个分区内的消息有序,而不是整个Topic的全局顺序。这是因为如果要保证多个分区的消息有序,不仅需要保证Broker保存的数据有序,消费时也需要按照顺序消费。但是,如果一个分区堵塞了,为了保持顺序,其他分区也不能被消费,这将降低整个系统的并发性和性能。 第一种保证消息顺序的方法是创建一个主题(Topic)时只创建一个分区(Partition),这样生产者的所有数据都发送到同一个分区。这样就能保证消息的消费顺序。这种方法适用于需要全局顺序的场景,比如多个直播间同时发送消息,需要保证消息按照直播间的顺序到达消费者。123 #### 引用[.reference_title] - *1* *2* [kafka怎么保证消息顺序?](https://blog.csdn.net/breeze210/article/details/122587073)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] - *3* [kafka如何保证消息的有序性](https://blog.csdn.net/m0_53396342/article/details/130083135)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值