
kafka-manager
文章平均质量分 97
石臻臻的杂货铺
CSDN博客之星Top5 ,石臻臻《Kafka运维与实战宝典》电子书作者(可找我:szzdzhp001下载)、 Kafka Contributor 、 KnowStreaming PMC、Nacos Contributor、华为云 MVP 。 滴滴Kafka技术专家 、
展开
-
Kafka的灵魂伴侣Logi-KafkaManger(6)之专家服务(分区热点分区不足)
文章目录专家服务Topic分区热点KM解决分区热点问题Topic分区不足项目地址: didi/Logi-KafkaManager: 一站式Apache Kafka集群指标监控与运维管控平台专家服务直观的展示和分析当前被管理的集群中出现的问题; 以及可视化运维Topic分区热点看到这个词,我们可以先想一想 什么是分区热点,什么情况下会出现分区热点情况;按照我的理解,我将其罗列为以下几点什么是分区热点Topic分区上数据分配不均衡造成的原因: 当生产者指定了分区数 或者key的时候, 有原创 2021-05-11 16:19:31 · 9831 阅读 · 29 评论 -
Kafka的灵魂伴侣Logi-KafkaManger(5)之运维管控–平台管理(用户管理和平台配置)
文章目录运维管控集群列表集群运维平台管理应用管理应用申请应用详情申请下线用户管理用户角色平台配置网关配置专栏文章列表项目地址: didi/Logi-KafkaManager: 一站式Apache Kafka集群指标监控与运维管控平台运维管控运维管控这个菜单栏目下面主要是供运维人员来管理所有集群的;集群列表Kafka的灵魂伴侣Logi-KafkaManger(3)之运维管控–集群列表集群运维Kafka的灵魂伴侣Logi-KafkaManger(4)之运维管控–集群运维(数据迁移和集群在线升级原创 2021-04-28 17:27:24 · 8756 阅读 · 13 评论 -
Kafka的灵魂伴侣Logi-KafkaManger(4)之运维管控–集群运维(数据迁移和集群在线升级)
详细介绍 应用管理 用户管理 平台配置等模块还有kafka的分区迁移任务;原创 2021-04-26 10:06:39 · 21562 阅读 · 29 评论 -
Kafka的灵魂伴侣Logi-KafkaManger(3)之运维管控--集群列表
文章目录运维管控物理集群列表实时流量byteRejected(B/s) 每秒被拒绝的字节数failedFetchRequest 每秒拉取失败的请求数failedProduceRequest 每秒发送失败的请求数前面的文章简单介绍了如何接入集群,以及Topic的申请和配额申请,这个时候我们还不是很了解Logi-KafkaManager究竟有哪些优点,如何去管理众多的kafka集群; 今天这篇文章,我们就来详细的了解一下,Logi-KafkaManager中的一些监控信息,以及如何正确✅的看待这些信息;运维原创 2021-04-21 17:36:24 · 9827 阅读 · 26 评论 -
Kafka的灵魂伴侣Logi-KafkaManger(2)之kafka针对Topic粒度的配额管理(限流)
文章目录申请配额(限流)针对Topic粒度的配额如何生效的测试kafka限流是否成功本文主要是讲解 针对Topic生产/消费 的限流配置; 如果不需要设置限流 则可忽略;申请配额(限流)不了解kafak配额管理机制的可以先了解一下 kafka中的配额管理(限速)机制默认创建完Topic之后是没有设置配额信息的,而且我们都知道Kafka的配额(限流)只支持三种粒度:user + clientiduserclientid如果kafka集群没有开启身份认证,则只能使用clientid方式原创 2021-04-15 18:01:16 · 3963 阅读 · 6 评论 -
Kafka的灵魂伴侣Logi-KafkaManger(1)之集群的接入及相关概念讲解
上一篇文章 Logi-KafkaManager的部署 详细讲解了Logi-KafkaManager的部署过程; 那么运维管理人员搭建好了平台之后,接下来要做什么呢?接下来第一步肯定就是接入现有kafka集群了; 那么本篇文章就来讲解一下 集群的接入;接入集群参数描述参数描述数据中心默认国内; 这个也只是一个划分数据的维度,我们一般默认就国内集群类型无效,后续会去掉安全协议TODOJMX认证TODO接入成功之后可以看见接入的物理集群; 列表中展示了原创 2021-04-14 10:51:55 · 13822 阅读 · 8 评论