Kafka
文章平均质量分 95
Kafka
李姓门徒
视思明,听思聪,色思温,貌思恭,言思忠,事思敬,疑思问,忿思难,见得思义。
多写、多记、多思考!
慢一点,再慢一点,慢就是快,少打错别字!
可以查看个人私人网站 https://www.dawnli.cn/
展开
-
如何更好地使用Kafka? - 故障时解决
要确保Kafka在使用过程中的稳定性,需要从kafka在业务中的使用周期进行依次保障。主要可以分为:事先预防(通过规范的使用、开发,预防问题产生)、运行时监控(保障集群稳定,出问题能及时发现)、故障时解决(有完整的应急预案)这三阶段。原创 2024-05-08 00:16:29 · 804 阅读 · 0 评论 -
如何更好地使用Kafka? - 运行监控篇
要确保Kafka在使用过程中的稳定性,需要从kafka在业务中的使用周期进行依次保障。主要可以分为:事先预防(通过规范的使用、开发,预防问题产生)、运行时监控(保障集群稳定,出问题能及时发现)、故障时解决(有完整的应急预案)这三阶段。原创 2024-05-08 00:03:20 · 887 阅读 · 0 评论 -
如何更好地使用Kafka? - 事先预防篇
要确保Kafka在使用过程中的稳定性,需要从kafka在业务中的使用周期进行依次保障。主要可以分为:事先预防(通过规范的使用、开发,预防问题产生)、运行时监控(保障集群稳定,出问题能及时发现)、故障时解决(有完整的应急预案)这三阶段。原创 2024-05-07 23:20:08 · 1175 阅读 · 0 评论 -
kafka部分partition的leader=-1修复方案整理
部分环境发现,支撑kafka部分topic的被设置成单副本。当出现单机故障时,部分topic-partition出现leader=-1,对应的partition无法正常读写数据。特别是kafka内置的topic __consumer_offsets,__consumer_offsets 是记录topic的消费组数据消费的相关信息,如果出现了该问题,就会导致部分topic的消费组无法正常进行数据消费。原创 2024-04-21 14:55:55 · 1068 阅读 · 0 评论 -
Kafka、RabbitMQ、Pulsar、RocketMQ基本原理和选型
消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,削峰填谷等问题。实现高性能、高可用、可伸缩和最终一致性架构。 针对常见的消息队列进行探讨,并比较kafka、rabbitmq、rocketmq、pulsar这几种消息队列的异同,以及相关使用场景原创 2024-04-16 19:36:29 · 1237 阅读 · 0 评论 -
KAFKA鉴权设计以及相关探讨
鉴权,分别由**鉴**和**权**组成- **鉴**: 表示身份认证,认证相关用户是否存在以及相关的用户名和密码是否一致- **权**: 完成身份的**鉴**后,还需要判断用户是否有相关操作的权限。因此对于某一个用户来说,通常情况下,需要完成**鉴**和**权**才能够满足一个完整的业务场景,因此通常将**鉴权**放在一起考量。本文探讨kafka的鉴权常用的鉴权方式以及相关鉴权设计方式。原创 2024-01-31 22:28:08 · 1446 阅读 · 0 评论 -
KAFKA监控方法以及核心指标
探讨kafka的监控数据采集方式以及需要关注的核心指标,便于日常生产进行监控和巡检。原创 2024-01-31 14:58:36 · 1986 阅读 · 0 评论 -
KAFKA节点故障的容错方案
本文主要探讨kafka集群的高可用容错方案和容错能力的探讨。在出现单机故障时相关的容错方案。更多关于分布式系统的架构思考请参考文档[关于常见分布式组件高可用设计原理的理解和思考](https://blog.csDN.net/weixin_43845924/article/details/135713107)原创 2024-01-30 23:24:19 · 1231 阅读 · 0 评论 -
KAFKA高可用架构涉及常用功能整理
探讨kafka的系统架构以及以及整体常用的命令和系统分析,本文主要探讨高可用版本的kafka集群,并基于日常工作中的沉淀进行思考和整理。更多关于分布式系统的架构思考请参考文档[关于常见分布式组件高可用设计原理的理解和思考](https://blog.csDN.net/weixin_43845924/article/details/135713107)原创 2024-01-30 19:40:48 · 1671 阅读 · 0 评论