【Kafka｜常用CLI】Topic管理

已于 2022-03-22 10:13:13 修改
阅读量2.6k 收藏 1
点赞数 1
分类专栏： 学习笔记 后端 文章标签： kafka
于 2022-03-22 10:11:13 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lingfy1234/article/details/123629308
版权
本文详细介绍了Kafka中topic的管理，包括创建、删除、查询等操作，以及修改主题分区和参数，还有特殊主题如__consumer_offsets的管理，并列举了运行命令时可能遇到的错误及其解决方案。
摘要由CSDN通过智能技术生成

本文介绍常用的topic管理命令，主要涉及kafka-topics脚本, kafka-reassign-partitions和kafka-config脚本，前者是专门的topic相关的脚本，中间的是分区重分配相关的脚本，后者是配置相关的脚本，不仅可以管理topic，还能管理broker，consumer等。

1.topic的管理：

增

kafka-topics --bootstrap-server broker_host:port --create --topic <topic_name> --partitions 1 --replication-factor 1

删

kafka-topics --bootstrap-server broker_host:port --delete --topic <topic_name>

查

  • 查用户建的某个主题的详细参数describe
kafka-topics --bootstrap-server broker_host:port --describe --topic <topic_n
最低0.47元/天 解锁文章
只要你一直跑
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【kafka专栏】运维篇之topic主题管理
字母哥博客
07-13 1042
kafka运维篇之topic主题管理
Kafka系列:查看Topic列表、消息消费情况
热门推荐
NIO4444
04-29 4万+
grep -Ev '^$|^#' config/server.properties Kafka系列:查看ZK Zookeeper地址 查看所有topic /app/kafka/kafka_2.12-2.1.0/bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --list 查看kafka指定topic的详情 bin/...
【kafka】Topic管理
weixin_33717298的博客
03-26 313
1.查看已经创建的Topiccd/usr/local/kafka ./bin/kafka-topics.sh--list--zookeeper10.1.44.186:2181,10.1.44.187:2181,10.1.44.188:2181 186187188 -------------...
kafka topic管理
MTonj的博客
03-16 3296
简记 kafka topic管理常用命令
Kafka学习笔记（四）·主题Topic的管理
一个到老才知道分享的人的博客
12-18 319
目录四、主题1、管理1、创建主题2、查看主题3、修改主题4、删除主题2、增加分区3、KafkaAdminClient应用 四、主题 1、管理 1、创建主题 [root@k8s ~]# bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic hello --partitions 2 --replication-factor 1 # localhost:2181 zookeeper所在的ip，zookeeper必穿参数，多个zookeepe
kafka-topic管理
idealemail的博客
11-05 2465
一.概念 kafka的topic是一个逻辑概念,一个topic对应多个分区,一个分区对应多个副本,一个副本对应一台broker上的一个文件夹,例如topic为test的第0个分区的一个副本的文件夹名为test-1,每个分区在一个broker上只能有一个副本,所以所有副本的文件夹名是相同的,只是在不同的broker上 每个副本的文件夹内有以下文件: 00000000000000000974.index //索引文件 00000000000000000974.snapshot //快照文件 0000..
二、Kafka环境搭建 & Topic管理
我要花开丶
09-25 432
Kafka单机安装 安装JDK1.8+，配置JAVA_HOME (CentOS 6.10 64bit) 配置主机名和IP映射 关闭防火墙&防火墙开机自启动 安装&启动Zookeeper 安装&启动|关闭Kafka 1.下载zookeeper安装资源： https://zookeeper.apache.org/releases.html 2.下载kafaka安装资源： http://kafka.apache.org/downloads 3.上传资源到虚拟机： 4.安装jdk
Python库 | strimzi_kafka_cli-0.1.0a34-py3-none-any.whl
03-24
strimzi-kafka-cli topics create --topic my-topic --partitions 3 --replication-factor 2 ``` **总结** `strimzi_kafka_cli`是Python开发者管理和操控Apache Kafka集群的利器，它简化了与Kafka交互的过程，使得...
kafka-cli-java
04-11
2. **运行命令**：通过命令行输入相应的命令，如`kafka-cli-java create topic --topic my-topic --partitions 3 --replication-factor 2`来创建一个名为my-topic的主题，具有3个分区和2个副本。 3. **参数解析**：...
kafka_topic创建、分区、删除管理
11-23
kafka管理工具，主要用于创建、删除、查看管理topic信息
CC00066.flink——|Hadoop&Flink.V05|——|Flink.v04|Flink SQL|Flink SQL输出表|输出到kafka|
yanqi_vip
04-13 344
一、FlinkSQL输出表：输出到Kafka ### --- 输出到kafka ~~~ # 往kafka上输出表 DataStreamSource<String> data = env.addSource(new SourceFunction<String> () { @Override public void ...
kafka Topic管理
小小艺的空间
07-12 123
创建 ./bin/kafka-topics.sh --bootstrap-server server1:9092,server2:9092,server3:9092 --create --topic topicName 名字 --partitions 3 分区 --replication-factor 3 副本因子 查看 ./bin/kafka-topics.sh --bootstrap-server server1:9092,server2:9092,server3:9092 --l
Kafka主题(Topic)的管理
通往神秘的道路的专栏
11-10 7061
主题的管理包括创建主题、 查看主题信息、修改主题和删除主题等操作。可以通过 Kafka 提供的 kafka-topics.sh 脚本来执行这些操作，这个脚本位于 $KAFKA_HOME/bin/目录下，其核 心代码仅 有一行，具体如下 : exec $(dirname $0)/kafka-run-class.sh kafka.admin.TopicCommand "$@" 可以看到其实质上是...
kafka管理Topic
爱吃鱼油
03-23 2427
windows下： //创建主题Create a topic kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test //查询所有主题 kafka-topics.bat --list --zookeeper 10.180.192.16:2181
9-kafka topic管理
weixin_34148340的博客
09-22 92
2019独角兽企业重金招聘Python工程师标准>>> ...
Kafka极客 - 14 Kafka Topic 主题管理
你今天真好看呀
12-13 1143
我来给出答案：从 Kafka 2.2 版本开始，社区推荐用 --bootstrap-server 参数替换 --zookeeper 参数，并且显式地将后者标记为“已过期”，因此，如果你已经在使用 2.2 版本了，那么创建主题请指定 --bootstrap-server 参数。有时候，我们想要让某个主题的副本在执行副本同步机制时，不要消耗过多的带宽。这就是说，即使你为 Kafka 集群设置了安全认证，限制了主题的创建，如果你使用 --zookeeper 的命令，依然能成功创建任意主题，不受认证体系的约束。
【消息队列】Kafka主题管理机制
日拱一卒，不期速成！
04-24 103
create是创建主题，partitions 代表主题的分区个数，replication-factor 分区的个数。
Kafka_04_Topic和日志
最新发布
爱喝可乐的w
02-22 1172
Topic和日志
Kafka存储策略与Topic管理
"kafka 存储策略，时间与大小删除...Kafka作为一个强大的消息中间件，其高效的存储策略、灵活的Topic管理和丰富的系统优势使其在大数据和实时流处理领域广泛应用。理解这些基本概念和技术对于有效地利用Kafka至关重要。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值