Kafka
文章平均质量分 76
发布 & 订阅
类似于一个消息系统,读写流式的数据.
处理
编写可扩展的流处理应用程序,用于实时事件响应的场景。
存储
安全的将流式的数据存储在一个分布式,有副本备份,容错的集群。
大数据学习僧
大数据从业者
项目经理背锅者
业务需求对接者
代码灵魂改造者
PPT熬夜设计者
展开
-
Kafka_2.12-2.1.0+Zookeeper-3.4.13集群部署详细教程
安装kafka和zookeeper教程。原创 2022-11-10 10:04:27 · 1078 阅读 · 0 评论 -
Kafka监控管理平台之本专栏三款插件功能对比情况
三款开源kafka集群监控管理插件对比总结三款插件的功能对比图:个人建议:雅虎的CMAK相对于滴滴的kafkamanager和KafkaCenter功能过于少,不适合运维开发人员,监控孤岛化,不推荐使用。滴滴的kafkamanager插件,功能丰富,相对于CMAK功能完善,集群指标丰富,配有告警配置和用户管理功能模块,适合运维开发人员使用,中文界面对于一般人员上手操作简单,但是现版本存在一个问题:只是展示提交了消费者组的offset,调用的是admin接口,未提交的offset的消费者组未展示原创 2021-09-24 10:27:34 · 389 阅读 · 2 评论 -
Kafka监控管理平台之CMAK原Apache Kafka 的集群管理器
CMAK(以前称为 Kafka Manager)是一种用于管理Apache Kafka集群的工具。 有关名称更改的详细信息,请参见下文。CMAK 支持以下内容:管理多个集群轻松检查集群状态(主题、消费者、偏移量、代理、副本分布、分区分布)运行首选副本选举使用选择要使用的代理的选项生成分区分配运行分区的重新分配(基于生成的分配)使用可选主题配置创建主题(0.8.1.1 与 0.8.2+ 具有不同的配置)删除主题(仅支持 0.8.2+ 并记住在代理配置中设置 delete.topic.en原创 2021-09-23 17:14:44 · 1635 阅读 · 0 评论 -
kafka-manager之功能强大适合运维的的滴滴开源插件kafkamanager
滴滴的开源插件相比雅虎的CMAK(kafkamanager),功能更丰富,个人感觉更适合运维人员的使用。 首先管控平台主要有两种用户视角,分别为:普通用户:站在使用Kafka的角度使用kafka-manager; 管理员:站在使用与管理Kafka的角度在使用kafka-manager;下面我们将从这两个用户的维度说明平台的功能及使用。1. 普通用户篇1.1 帐...原创 2020-06-01 10:35:46 · 3661 阅读 · 4 评论 -
一站式Kafka监控管理平台KafkaCenter
最近在做kafka监控管理的插件调研,今天主要是写一下优秀的开源插件之KafkaCenter,git地址在文末。一张图总览一下kafkaCenterKafkaCenter是什么?KafkaCenter是Kafka 集群管理和维护,生产/消费监控,生态组件使用的统一一站式平台。KafkaCenter 解决了什么问题在给大家说我们解决什么问题之前,先说说在没有KafkaCe...原创 2020-06-01 10:35:25 · 3552 阅读 · 0 评论