![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
消息中间件
文章平均质量分 96
谢先生F
2014年入行的程序猿。多年开发和架构经验。专注于Java、云原生、大数据领域技术。负责过亿级流量架构的设计和落地,千万级数据治理问题。
展开
-
分布式流处理组件-生产实战:Broker副本与优化
在最开始我们就说过,Kafka中存储消息数据看似在向Topic写入,但其实Topic只是逻辑上的概念,实际上数据最终都以Partition为落点。随后Broker会对Partition中的存储数据做进一步操作。与此同时Producer和Consumer都是跟Partition的Leader角色进行数据发送与消费。顾名思义,这都是我们之前了解过的本章我们针对Broker中的副本信息作细致介绍。副本基本信息副本间Leader选举与故障处理Leader Partition自平衡处理。原创 2023-08-03 17:13:44 · 87 阅读 · 0 评论 -
分布式流处理组件-生产实战:Broker节点负载
系统环境中由于业务不断调整,集群中Broker节点数量并不固定,此时不可避免的需要动态增减节点。为了保证集群的高可用性,此时不可避免的人为干预~原创 2023-06-22 19:20:40 · 95 阅读 · 0 评论 -
分布式流处理组件-理论篇:Broker
通过之前几章的介绍,我们对Producer有了一定的认识。Broker本次我们将从如下方面对Broker进行介绍Broker工作原理与ZKBroker节点管理Broker副本选举、故障处理、放置策略等Broker数据存储、清除策略等Broker预计4~5章结束~Broker部分更多是理论内容,代码部分偏少本章作为Broker的入门介绍,到这里就全部结束,接下来介绍Broker负载均衡等相关内容期待~原创 2023-06-10 23:37:41 · 220 阅读 · 0 评论