![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
文章平均质量分 92
CatPad
川大在读,喜欢英语,编程,理想主义者。
展开
-
Macos OS 安装Kafka Eagle
Kafka Eagle 是一款开源工具,专门用于监控和管理 Apache Kafka 集群。它提供了一系列功能,帮助用户更轻松地维护他们的 Kafka 环境。首先,Kafka Eagle 提供实时监控功能,让你能够迅速了解 Kafka 集群的运行状态,包括关键性能指标、生产者和消费者的状态以及健康状况。这有助于及时发现潜在问题。此外,Kafka Eagle 还支持警报和通知功能,允许你设置警报规则,以便在出现问题或性能下降时接收通知。这确保了你可以快速采取行动来解决问题。原创 2023-11-24 09:06:13 · 365 阅读 · 0 评论 -
【Kafka系列】大禹治水——谈谈Kafka的高性能
欢迎关注,分享更多原创技术内容~微信公众号:ByteRaccoon、知乎:一只大狸花啊、稀土掘金:浣熊say微信公众号海量Java、数字孪生、工业互联网电子书免费送~原创 2023-11-23 14:33:11 · 71 阅读 · 0 评论 -
智慧工厂IOT项目Kafka消息积压优化方案
Kafka 系统在本公司的智慧工厂 IOT 项目中得到了广泛应用。目前,全国包括海外有上千个矿山工厂、光伏工厂、Cableway工厂等使用我们的系统,虽然这些工厂的业务层逻辑各不相同,并且对应的服务系统也不完全一样。但是作为消息中间件和缓存中间件的Kafka集群和MQTT集群整个公司都是使用的同一套底层服务,所以也面临着巨大的负载压力。随着业务的迅猛发展, Kafka 集群规模快速增长。原创 2023-11-23 14:31:40 · 474 阅读 · 0 评论 -
【Kafka系列】Kafka事务机制
Kafka 的事务机制是一种保证消息系统中一组相关操作要么全部成功,要么全部失败的机制。它其实类似于分布式事务的概念,旨在提供端到端的一次语义(End-to-End Exactly-Once Semantics),确保消息在传输过程中不会被重复、丢失或不一致。具体体现在当生产者发送一组消息时,可以随时决定是否要撤回这段消息,而被撤回的消息消费者那边也不能消费到该消息。原创 2023-11-22 11:44:14 · 237 阅读 · 0 评论 -
【Kafka系列】Kafka的再均衡机制
再均衡是Kafka中用于重新分配消费者组(consumer group)中消费者(consumer)和分区(partition)之间关系的机制。当消费者组内的消费者数量变化,或者消费者订阅的主题发生变化(新增或删除分区),都可能触发再平衡。Kafka提供了三种再平衡策略:Round Robin(轮询),Range(范围)和Sticky(粘性)。Round Robin(轮询): 这种策略会以轮询的方式将所有分区依次分配给消费者,确保每个消费者都能均匀地获得分区。原创 2023-11-21 15:31:21 · 388 阅读 · 0 评论