kafka--基础知识点--6--ISR 和 ACK机制

最新推荐文章于 2024-04-19 20:28:40 发布
最新推荐文章于 2024-04-19 20:28:40 发布
阅读量480 收藏 1
点赞数
分类专栏： kafka 文章标签： kafka ISR ACK
原文链接：https://www.bilibili.com/video/BV1a4411B7V9?p=15
版权
本文探讨了Kafka中重要的生产者特性，即ISR（In-Sync Replicas）和ACK（Acknowledgement）的作用。ISR确保数据同步可靠性，而ACK则关乎数据丢失防护等级。通过实例解析这两个概念，帮助理解Kafka消息传递的可靠性保障。
摘要由CSDN通过智能技术生成
Chasing__Dreams
关注
专栏目录
Kafka（四）------Kafka知识点整理
互联网叫兽
08-11 1227
一、Kafka名词含义解释 1.1、Broker 一台 kafka 服务器就是一个 broker； 多个broker组成一个Kafka集群，集群中每一个broker的id要唯一； 一个 broker可以容纳多个 topic； 1.2、Topic kafka通过Topic将消息进行分类，每一个消息都具有一个Topic，Topic存储在Broker上。 1.3、partition 一个topic可以分布到多个broker上； 一个 topic 包括多个 partition(分区)，不同的分区对应着不同的数据文件
ElasticSearch-Kafka-RabbitMQ
weixin_73241486的博客
04-04 1001
Elasticsearch 是基于 Lucene 的 Restful 的分布式实时全文搜索引擎， 每个字段都被索引并可被搜索，可以快速存储、搜索、分析海量的数据。Kafka是分布式发布-订阅消息系统是一个可划分的，冗余备份的持久性的日志服务，它主要用于处理流式数据。组件:主题(Topic)：Kafka主题是一堆或一组消息。生产者(Producer)：在Kafka，生产者发布通信以及向Kafka主题发布消息。消费者(Consumer)：Kafka消费者订阅了一个主题，并且还从主题中读取和处理消息。
第十章 kafka专题之ACK/ISR/HW机制
qq_27924553的博客
01-06 1523
kafka专题之ACK/ISR/HW机制
Kafka分区策略、ISR以及ack机制、故障处理机制、消费方式、分区分配策略
qq_44918331的博客
05-27 1358
Kafka分区策略、ISR以及ack机制、故障处理机制、消费方式、分区分配策略 分区原因 1.分区的原因 （1）方便在集群中扩展，每个partition可以通过调整以适应它所在的机器，而一个topic又可以有多个partition组成，因此整个集群就可以适应任意大小的数据了。 （2）可以提高并发，因此可以以partition为单位读写 2.partition的三种分区原则 （1）指明partition的情况下，直接将指明的值直接作为partition的值 （2）没有指明partition值单有key的值，将
Kafka数据高可靠ACK/ISR/HW你都会了吗？
独行侠梦的博客
04-23 279
为保证producer发送的数据，能可靠的发送到指定的topic，topic的每个partition收到producer发送的数据后，都需要向producer发送ack（acknowled...
Kafka HA Kafka一致性重要机制之ISR(kafka replica)
MannerXu的博客
07-27 1227
一、kafka replica 当某个topic的replication-factor为N且N大于1时，每个Partition都会有N个副本(Replica)。kafka的replica包含leader与follower。 Replica的个数小于等于Broker的个数，也就是说，对于每个Partition而言，每个Broker上最多只会有一个Replica，因此可以使用Brok...
聊聊Kafka的ACK、ISR、HW、exeact_once
用贪心算法解背包问题时对单位重量物品价值排序Java实现
03-22 409
ACK的生成这向Kafka集群生成数据时Kafka集群给生产者响应策略，acks有三种取值：0、1、-1（all）。 当acks=0的时候，如果follow的数据和leader的数据不一致的时候leader挂掉，这个时候重新选择leader，follow还没来得及同步leader的数据就丢掉了；还有一种情况是当leader没挂也会丢数据，即当网络动荡的时候，数据在网络传输过程中丢掉，就算lea...
Kafka之ISR机制的理解
热门推荐
daima_caigou的博客
11-03 2万+
问题1：Kafka对于producer发来的数据的怎么保证可靠性？ 每个partition都给配上副本，保证数据不丢失。 副本数据同步策略 和zookeeper不同的是，Kafka选择的是全部完成同步，才发送ack。但是又有所区别。 所以，你们才会在各种博客看到这句话【kafka不是完全同步，也不是完全异步，是一种ISR机制】 这句话对也不对，不对也对（谜语人......） 首先笔者认为：Kafka使用的是完全同步方案 完全同步的优点 同样为了容忍 n 台节点的故障，过半机制需要 2n+1
消息队列核心知识点-yes.zip
08-14
本资料主要针对MQ的核心知识点进行深入探讨，以常见的面试问题为切入点，涵盖如何保证消息不丢失、处理重复消息、确保消息有序性以及应对消息堆积等关键议题，并对RocketMQ和Kafka等主流MQ进行了源码级别的解析。...
【kafka原理】Kafka生产者 (分区策略和ACK应答机制)(1)
最新发布
2301_79655576的博客
04-19 995
由于篇幅原因，就不多做展示了《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！由于篇幅原因，就不多做展示了《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！
Kafka的ACK参数详解及ISR、HW、LEO介绍
weixin_41745141的博客
03-24 1858
介绍了kafka的ACK、ISR、HW、LEO等参数
Kafka数据可靠性保证-ack,ISR,HW
陈小哥cw
06-21 1453
文章目录1.副本数据同步策略2.ISR,AR3.ack应答机制4. HW,LEO,LSO,LW名词解释5.故障处理细节1.follower故障2.leader故障6.ISR 集合和 HW、LEO的关系 为保证producer发送的数据，能可靠的发送到指定的topic，topic的每个partition收到producer发送的数据后，都需要向producer发送ack（acknowledgement确认收到），如果producer收到ack，就会进行下一轮的发送，否则重新发送数据。 1.副本数据同步策略
kafka-04数据同步原理ISR、ACK、LEO、HW
m0_45987292的博客
02-24 1310
111
Kafka系列（三）、生产者分区策略、ISR、ACK、幂等性、事务机制
王义凯 的博客
09-17 1878
本篇是kafka系列的第三篇，介绍kafka生产者的分区策略、ISR、ACK机制，故障处理，一致性语义，Exactly Once精准一次性语义等
kafka的 ack 应答机制
jojo_oulaoula的博客
09-19 2733
replica） 就是 Kafka 为某个分区维护的一组同步集合，即每个分区都有自己的一个 ISR 集合，处于 ISR 集合中的副本，意味着 follower 副本与 leader 副本保持同步状态，只有处于 ISR 集合中的副本才有资格被选举为 leader。partition的leader落盘成功后返回ack，如果在follower同步成功之前leader故障，尽管 leader 已经落盘成功，但是 follower 的同步进度肯定是低于leader，这时故障，那么将会。java api 中相应参数。
kafka分区策略、ISR以及ack机制、故障处理机制、消费方式、分区分配策略
sghuu的博客
10-21 3635
分区原因： 1.分区的原因 （1）方便在集群中扩展，每个partition可以通过调整以适应它所在的机器，而一个topic又可以有多个partition组成，因此整个集群就可以适应任意大小的数据了。 （2）可以提高并发，因此可以以partition为单位读写 2.partition的三种分区原则 （1）指明partition的情况下，直接将指明的值直接作为partition的值 （2）没有指明pa...
kafka的isr理解
啊大海全是水的博客
04-25 1万+
问题如下： kafka 为了保证数据的一致性使用了isr 机制 1 首先我们知道kafka 的数据是多副本的，每个topic 下的每个分区下都有一个leader 和多个follower， 2 每个follower 的数据都是同步leader的 这里需要注意 是follower 主动拉取leader 的数据 注意问题：follewer 只是数据的副本提供数据的可恢复性，本身和kafka 的读...
简历写了会Kafka，面试官90%会让你讲讲acks参数对消息持久化的影响
weixin_33727510的博客
04-24 2540
目录（0）写在前面（1）如何保证宕机时数据不丢失？（2）多副本冗余的高可用机制（3）多副本之间数据如何同步？（4）ISR到底指的什么东西？（5）acks参数的含义？（6）最后的思考个人公众号：石杉的架构笔记（ID:shishan100）（0）写在前面 面试大厂时，一旦简历上写了Kafka，几乎必然会被问到一个问题：说说acks参数对消息持久化的影响？这个acks参数在kafka的使用中，是非常核心...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值