2.【kafka运维】ConfigCommand运维脚本

最新推荐文章于 2024-04-19 20:32:26 发布
最新推荐文章于 2024-04-19 20:32:26 发布
阅读量9.6k 收藏 11
点赞数 13
分类专栏： Kafka 文章标签： 运维 kafka 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010634066/article/details/119275675
版权
本文介绍了滴滴开源的LogiKM Kafka监控与管控平台中的ConfigCommand，用于查询、添加、删除和修改Kafka的配置。内容涵盖Topic配置查询、动态配置管理、Broker日志配置以及默认配置的优先级。此外，还提供了不同类型的配置查询和修改方法，并提到了ConfigCommand的可选配置附件。
摘要由CSDN通过智能技术生成

在这里插入图片描述

文章目录

日常运维 、问题排查 怎么能够少了滴滴开源的
滴滴开源LogiKM一站式Kafka监控与管控平台

ConfigCommand

Config相关操作; 动态配置可以覆盖默认的静态配置;

1 查询配置

Topic配置查询

展示关于Topic的动静态配置

1.1.查询单个Topic配置(只列举动态配置)

sh bin/kafka-configs.sh --describe --bootstrap-server x

了解本专栏 订阅专栏 解锁全文 超级会员免费看
石臻臻的杂货铺
关注
专栏目录
订阅专栏
1.【kafka运维】TopicCommand运维脚本(1)
石臻臻的杂货铺(szzdzhp001)
07-14 1382
TopicCommand 1.Topic创建 bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 3 --partitions 3 --topic test 相关可选参数 参数 描述 例子 --bootstrap-server 指定kafka服务 指定连接到的kafka服务; 如果有这个参数,则 --zookeeper可以不需要 –bootstrap-server loc
kafka 常用运维脚本
weixin_40319752的博客
12-10 204
kafka客户端消费 bin/kafka-console-consumer.sh –bootstrap-server ip:9092(默认) -topic test-topic [-group groupNmae -partition partitionNum] kafka客户 客户端生产者 bin/kafka-console-producer.sh –broker-list ip:9092(多...
【Kafka】动手实践之Kafka运维脚本系列（持续更新）
浩瀚宇宙的一粒尘埃
12-24 710
文章目录kafka-delete-records.shkafka-log-dirs.shkafka-preferred-replica-election.sh kafka-delete-records.sh 作用：删除topic指定partition的指定offset之前的数据 用法： 参数 是否必须 备注 –bootstrap-server REQUIRED 设置连接的Kafka服务地址，多个以英文逗号分隔 –command-config 包含需要传递给Admin Client的
kafka操作脚本
我的博客
04-10 408
#!/bin/bash source /etc/profile if [ $1 = "start" ] then echo "------------ensure that zookeeper is started------------------" cat /data/kafka_2.11-0.10.1.0/config/nodes | while read host ...
【kafka运维】Leader重新选举运维脚本(1)
2401_83703835的博客
04-19 1086
2020年在匆匆忙忙慌慌乱乱中就这么度过了，我们迎来了新一年，互联网的发展如此之快，技术日新月异，更新迭代成为了这个时代的代名词，坚持下来的技术体系会越来越健壮，JVM作为如今是跳槽大厂必备的技能，如果你还没掌握，更别提之后更新的新技术了。更多JVM面试整理：《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！9)][外链图片转存中…(img-Ywbc96hm-1713529895940)]
3.【kafka运维】Topic的生产和消费运维脚本
石臻臻的杂货铺(szzdzhp001)
08-02 9399
文章目录1.Topic的发送kafka-console-producer.sh2. Topic的消费kafka-console-consumer.shMore 日常运维 、问题排查 怎么能够少了滴滴开源的 滴滴开源LogiKM一站式Kafka监控与管控平台 1.Topic的发送kafka-console-producer.sh 4.1 生产无key消息 ## 生产者 bin/kafka-console-producer.sh --bootstrap-server localhost:9092 --top
【kafka运维】Leader重新选举运维脚本
最新发布
2401_83703866的博客
04-19 965
一般像这样的大企业都有好几轮面试，所以自己一定要花点时间去收集整理一下公司的背景，公司的企业文化，俗话说「知己知彼百战不殆」，不要盲目的去面试，还有很多人关心怎么去跟HR谈薪资。这边给大家一个建议，如果你的理想薪资是30K，你完全可以跟HR谈33~35K，而不是一下子就把自己的底牌暴露了出来，不过肯定不能说的这么直接，比如原来你的公司是25K，你可以跟HR讲原来的薪资是多少，你们这边能给到我的是多少？你说我这边希望可以有一个20%涨薪。
【kafka运维】Kafka全网最全最详细运维命令合集(精品强烈建议保存)
2401_83740189的博客
04-12 778
为了做好运维面试路上的助攻手，特整理了上百道。
Kafka操作之kafka-topics
山水牧羊
06-03 2036
基本参数
kafka初学
yangmingzhe888的博客
09-07 300
1、安装 tar -xzf kafka_2.12-2.3.0.tgz 2、指定zk vi /config/server.properties 3、启动 ./kafka-server-start.sh [-daemon] …/config/server.properties --后台运行 4、创建topic ./kafka-topics.sh --create --zookeeper zkIp:9...
Linux tcp/ip config command
weixin_30509393的博客
11-12 77
1.setup IP address ifconfig eth0 netmask 255.255.255.0 192.168.0.10 2.setup default route route add default 192.168.0.1 3.setup DNS make sure /etc/resolv.conf has the following line...
Kafka——管理Kafka(命令行工具)详解
吴声子夜歌的博客
08-09 5142
有时候，我们需要知道提交的消费者群组偏移量是多少，比如某个特定的群组是否在提交 偏移量，或者偏移量提交的频度。也就是说，如果集群里有 5 个 broker，生产者的配额是 10MB/s，那么它可以以 10MB/s 的速率在单个 broker 上生成 数据，总共的速率可以达到 50MB/s。根 据分区大小的不同，复制过程可能需要花一些时间，因为数据是通过网络复制到新副本上 的。也就是说，在没有认证的情况下也可以使用这些命令行工具，在没 有安全检查和审计的情况下也可以执行诸如主题变更之类的操作。
java设计模式之命令模式
weixin_30314631的博客
05-08 140
【学习难度：★★★☆☆，使用频率：★★★★☆】 装修新房的最后几道工序之一是安装插座和开关，通过开关可以控制一些电器的打开和关闭，例如电灯或者排气扇。在购买开关时，我们并不知道它将来到底用于控制什么电器，也就是说，开关与电灯、排气扇并无直接关系，一个开关在安装之后可能用来控制电灯，也可能用来控制排气扇或者其他电器设备。开关与电器之间通过电线建立连接，如果开关打开，则电线通电，电器工作；反...
Linux command- ifconfig
mingwei6的博客
06-04 435
ifconfig是Linux用来显示和设置网络的命令。 常用如下所示： 查看信息 1.ifconfig 显示处在激活状态的网络 2.ifconfig -a 显示所有的网络接口 3.ifconfig -eth0 显示指定的eth0网络接口信息 网络状态设置 1. ifconfig eth0 up 打开指定的eth0网口 2. ifconfig eth0 down 关闭制定的e...
kafka最好用的脚本三：kafka-config
weixin_34194087的博客
12-09 2175
kafka-config 使用手册 官方说明 Add/Remove entity config for a topic, client, user or broker. Option Description ------ ----------- --add-config <String> K...
Kafka中shell命令使用（创建、查看、修改和删除Topic，模拟创建生产者和消费者）
IT之一小佬的博客
10-19 5870
Kafka中shell命令使用（创建、查看、修改和删除Topic，模拟创建生产者和消费者）
kafka运维命令大全
别来沾边儿
07-06 367
相关可选参数支持正则表达式匹配Topic来进行删除,只需要将topic 用双引号包裹起来 例如: 删除以为开头的topic;删除任意Topic (慎用)zk方式(不推荐)kafka版本 >= 2.2 支持下面方式（推荐）单个Topic扩容批量扩容 (将所有正则表达式匹配到的Topic分区扩容到4个) 正则表达式的意思是匹配所有; 您可按需匹配PS: 当某个Topic的分区少于指定的分区数时候,他会抛出异常;但是不会影响其他Topic正常进行;相关可选参数 | 参数 |描述 |例子| |--|--|--| |
Kafka AdminClient：高效安全的集群运维解决方案
随着时间的推移，KafkaAdminClient的功能不断扩展和完善，社区持续对其进行优化，反映了其在Kafka运维中的核心地位。因此，掌握如何有效地使用KafkaAdminClient是现代Kafka管理员必备的技能，它有助于提高运维效率，...
评论 16
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

石臻臻的杂货铺

不用打赏,加微信,交个朋友就好

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值