JoinGroup的过程

最新推荐文章于 2023-09-12 15:10:52 发布
最新推荐文章于 2023-09-12 15:10:52 发布
阅读量4k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Leon_Jinhai_Sun/article/details/113196261
版权

在rebalance之前，需要保证coordinator是已经确定好了的，整个rebalance的过程分为两个步骤，Join和Sync

join: 表示加入到consumer group中，在这一步中，所有的成员都会向coordinator发送joinGroup的请求。一旦所有成员都发送了joinGroup请求，那么coordinator会选择一个consumer担任leader角色，并把组成员信息和订阅信息发送消费者

leader选举算法比较简单，如果消费组内没有leader，那么第一个加入消费组的消费者就是消费者leader，如果这个时候leader消费者退出了消费组，那么重新选举一个leader，这个选举很随意，类似于随机算法

protocol_metadata: 序列化后的消费者的订阅信息

leader_id： 消费组中的消费者，coordinator会选择一个座位leader，对应的就是member_id

member_metadata 对应消费者的订阅信息

members：consumer group中全部的消费者的订阅信息

generation_id： 年代信息，类似于之前讲解zookeeper的时候的epoch是一样的，对于每一轮rebalance，generation_id都会递增。主要用来保护consumer group。隔离无效的offset提交。也就是上一轮的consumer成员无法提交offset到新的consumer group中。

每个消费者都可以设置自己的分区分配策略，对于消费组而言，会从各个消费者上报过来的分区分配策略中选举一个彼此都赞同的策略来实现整体的分区分配，这个"赞同"的规则是，消费组内的各个消费者会通过投票来决定

在joingroup阶段，每个consumer都会把自己支持的分区分配策略发送到coordinator

coordinator手机到所有消费者的分配策略，组成一个候选集

每个消费者需要从候选集里找出一个自己支持的策略，并且为这个策略投票

最终计算候选集中各个策略的选票数，票数最多的就是当前消费组的分配策略

 

Leon_Jinhai_Sun
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
扫描二维码并进入手机浏览器
05-24
Android扫描二维码显示并可以调用手机浏览器进入链接
SQL存储过程实例
04-20
GROUP BY s.stuName; ``` #### 三、建表语句分析 **建库语句**： ```sql IF EXISTS (SELECT * FROM sys.databases WHERE name = 'BOOK') BEGIN DROP DATABASE BOOK; END GO CREATE DATABASE BOOK; GO ``` 该部分...
钉钉群聊机器人python发送消息
n1355553344的博客
08-21 4088
import base64 import hashlib import hmac import json import time import urllib.parse import requests def send_rebot(secret: str, access_token: str, content: str): timestamp = str(round(time.time() * 1000)) secret_enc = secret.encode('utf-8')
mysql join
wjb214149306的博客
12-29 2085
select * from A innner join B on A.key = B.key; select * from A left join B on A.key = B.key; select * from A right join B on A.key = B.key; select * from A left join B on...
十二、kafka消费者之joinGroup-深入理解篇
Coding fly的博客
02-08 2845
主要是kafka消费者的joinGroup这里的重点内容太多了，一篇也讲不完，所以再开一篇从几个方面来深入分析。 group状态转换 从上一篇我们知道针对consumeGroup也有好几种状态，分别是PreparingRebalance，CompletingRebalance，Stable，Dead，Empty kafka总结的各个状态可以执行的操作及状态流转如图一 PreparingRebalance：准备重平衡 心跳检测 同步group信息 收到leaveGroupRequest 等待group成员
Vue —— 钉钉扫码登录第三方网站
月来better
09-03 2067
钉钉开放平台文档地址：https://developers.dingtalk.com/document/app/scan-qr-code-to-login-isvapp
MySQL利用profile分析慢sql详解（group left join效率高于子查询）
12-16
mysql 的 sql 性能分析器主要用途是显示 sql 执行的整个过程中各项资源的使用情况。分析器可以更好的展示出不良 SQL 的性能问题所在。 最近遇到一个查询比较慢的sql语句，用了子查询，大概需要0.8秒左右，这个消耗...
MSSQL分页存储过程完整示例(支持多表分页存储)
09-10
如果当前页是第一页，且使用了分组，那么存储过程会先执行一个带有GROUP BY的计数查询来获取总记录数。然后，利用TOP关键字和ORDER BY子句获取指定页码上的数据。 对于非分组情况，存储过程会直接通过WHERE子句加上...
Oracle 查询存储过程做横向报表的方法
09-10
2. **统计与汇总**：在临时表中进行必要的统计和汇总操作，这可能涉及到聚合函数（如SUM, COUNT, AVG等）和GROUP BY子句，以便为横向报表生成必要的计算字段。 3. **游标操作**：将临时表中的记录放置到游标中。...
group12_sql
02-21
11. JOIN操作：TSQL支持不同类型的JOIN，如INNER JOIN、LEFT JOIN、RIGHT JOIN和FULL JOIN，用于合并来自多个表的数据。 12. 分区函数：在大型数据集上，TSQL的PARTITION BY关键字可以实现数据分区，提升查询性能。...
CodeSmtih生成Oracle存储过程
06-22
查询过程可能使用`SELECT`语句，根据需要添加JOIN、WHERE和GROUP BY等。 5. **处理异常和事务**：存储过程中通常需要包含错误处理机制，如`BEGIN-EXCEPTION-END`块，以及事务管理，如`BEGIN-COMMIT-ROLLBACK`，以...
sql存储过程实例下载
12-25
可以创建一个名为`GET_COMPUTER_STUDENT_BOOKS`的存储过程，利用JOIN语句和WHERE条件来筛选所需数据。例如： ```sql CREATE PROCEDURE GET_COMPUTER_STUDENT_BOOKS @start_date DATE, @end_date DATE AS BEGIN ...
SQL server存储过程习题,SQL触发器习题.rar
07-16
1. **基础语法**：包括但不限于SELECT查询、INSERT插入、UPDATE更新、DELETE删除、JOIN连接、子查询、聚合函数、排序（ORDER BY）、分组（GROUP BY）等。 2. **练习目的**：通过习题熟悉SQL语言的语法结构，提高...
交叉表 存储过程 实例
07-10
其中代码:SELECT CONVERT(nvarchar, e.bmdwdm) AS '报名单位代码', a.bmdwmc AS '报名单位', SUM(CASE e.khmkdm WHEN '... khmkdm) AS e INNER JOIN tblbmdw AS a ON a.bmdwdm = e.bmdwdm GROUP BY e.bmdwdm, a.bmdwmc
关于java MulticastSocket中的joinGroup(SocketAddress mcastAddr,NetworkInterface netif)
weixin_30613433的博客
05-02 678
今天复习了一下java网络编程这方面（其实是之前没有学好），之前在linux下用c来做过一些例子，不过不好久没有用也就忘得一干二净了。不知道c/c++的东西不太好记，还是当初没好好学。 关于组播这方面，其实别的问题没有，《JAVA网络编程》这本书说得很明白了，但遇到其中一个很令人费解的api，如下： java MulticastSocket中的joinGroup(SocketAddress m...
浏览器唤起钉钉PC端解决办法
热门推荐
沐唐风宋雨
07-14 5万+
需求要实现浏览器页面的分享功能，需点击分享打开钉钉PC端的功能。 查看官方文档，只提供了打开对应某个人的协议方式： <a href="dingtalk://dingtalkclient/action/sendmsg?dingtalk_id={id}"></a>，同时需要制定钉钉号。 如果只是单纯唤起客户端，则可以考虑如下协议，尝试有效： dingtalk://dingtalkclient/page/link 或者 dingtalk://dingtalkclient/action
Uniapp 解决组件在官方文档不支持的事件上，接收小程序原生组件事件
最新发布
卡尔特斯
09-12 376
即可获得事件，如果获取不到，看看是不是首字母大小写的问题，其他参数可按小程序原生一样使用。在原生中是这么使用，如果在不通过小程序原生自定义。中需要条件编译指定平台使用，小程序中的事件都是。组件的情况下，能不能直接使用呢，答案是可以的。现在需要在抖音小程序上使用加粉丝群功能，官方。官网并没有支持，一个是。有自带这个功能，但是。类型，一个是回调事件。
【OpenIM原创】uni-app使用之 初始化会话 消息 好友 监听器
OpenIM的博客
09-22 1264
写在前面 Open-IM是由前微信技术专家打造的开源的即时通讯组件。Open-IM包括IM服务端和客户端SDK，实现了高性能、轻量级、易扩展等重要特性。开发者通过集成Open-IM组件，并私有化部署服务端，可以将即时通讯、实时网络能力快速集成到自身应用中，并确保业务数据的安全性和私密性。 了解更多原创文章： 【OpenIM原创】开源OpenIM：轻量、高效、实时、可靠、低成本的消息模型 【OpenIM原创】C/C++调用golang函数，golang回调C/C++函数 【OpenIM原创】简单轻松入门 一文
STM32 IP4_ADDR和igmp_joingroup用循环的办法添加多个组播ip
06-08
在上述代码中，`igmp_joingroup` 函数用来将当前网络接口加入到指定的组播组中，第一个参数是指向网络接口的指针，第二个参数是指向组播IP地址的指针。循环中的变量 `i` 用来遍历数组中的所有组播IP地址。 需要注意...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值