kafka查看Topic列表及消费状态等常用命令

最新推荐文章于 2024-06-16 10:41:46 发布
最新推荐文章于 2024-06-16 10:41:46 发布
阅读量1.5w 收藏 31
点赞数 6
分类专栏： 程序员 Java spring 文章标签： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/manong20210713/article/details/119980357
版权
本文详述了在kafka_1.3.3.0中管理Topic和Consumer Group的操作，包括新建、删除Topic，查看所有Topic、指定Topic详情、Consumer Group列表及其详情。特别提到查看Consumer Group时需区分新旧版本，并解释了消费组列名如CURRENT-OFFSET、LOG-END-OFFSET、LAG等的含义。同时，文章讨论了`auto.offset.reset`设置，解释了earliest、latest和none三种策略在消费者无法找到有效offset时的行为。
摘要由CSDN通过智能技术生成

　　本文中的操作均基于kafka_1.3.3.0，且所有命令经过实际验证。

2|0常用工具

新建Topic

./kafka-topics --zookeeper 166.188.xx.xx --create --topic flink_source --partitions 1 --replication-factor 1

  • replication-factor： 指定副本数量

  • partitions：指定分区

删除Topic

./kafka-topics --zookeeper 166.188.xx.xx --delete --topic flink_source

最低0.47元/天 解锁文章
码农九珍
关注
  • 6
    点赞
  • 踩
  • 31
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
【Kafka】查看kafka的topic数据
m0_54252387的博客
07-05 1万+
启动kafka： 查看已创建的topic列表：./kafka-topics.sh --list --zookeeper localhost:2181查看对应topic的描述信息： 消费消息：
kafka3.2常用命令
08-25
### Kafka 3.2 常用命令详解 #### 一、启动 ZooKeeper 服务 在启动 Kafka 之前，必须先启动 ZooKeeper 服务。ZooKeeper 为 Kafka 提供了集群协调服务。 ##### 操作步骤： 1. **打开命令行窗口**： - 打开 cmd ...
Kafka系列：查看Topic列表、消息消费情况、模拟生产者消费者
热门推荐
YJ000312的博客
03-29 3万+
这条命令其实并不执行删除动作，仅仅是在zookeeper上标记该topic要被删除而已，同时也提醒用户一定要提前打开delete.topic.enable开关，否则删除动作是不会执行的。a）在server.properties中设置delete.topic.enable参数为ture。3.执行删除命令：rmr /brokers/topics/test。2.找到topic所在目录：ls /brokers/topics。执行topic删除命令时，出现提示。
kafka常用命令(详细)
最新发布
代码蒋的博客
06-16 1836
说明：在${KAFKA_HOME}/config/server.properties中配置 delete.topic.enable 为 true，这样才能生效，删除指定的 topic主题。参数 --topic 指定 Topic 名，–partitions 指定分区数，–replication-factor 指定备份(副本)数。# LOG-END-OFFSET: 当前最高水位偏移量，也就是最近一个读取消息的偏移量，同时也是最近一个提交到集群的偏移量。–from-beginning：表示从头开始接收数据。
kafka查看topic配置
u011250186的博客
08-22 1万+
kafka查看topic配置
kafka管理工具 | 监控 | 偏移量 | 消费| offset，必备技能
玉皇大帝不开心
07-24 1155
Kafka内部提供了许多管理脚本，这些脚本都放在$KAFKA_HOME/bin目录下，CDH版本放在/opt/cloudera/parcels/KAFKA-3.1.0-1...
kafka查看topic列表和topic消息
weixin_42324471的博客
09-28 9534
查询topic 列表信息 前提是需要进入到kafka的目录 Linux 目录 \kafka_2.12-2.8.0\bin\ sh kafka-topics.sh --list --zookeeper localhost:2181 windows 目录 \kafka_2.12-2.8.0\bin\windows kafka-topics.bat --list --zookeeper localhost:2181 window下执行截图 查看topic的消息列表 linux sh kafka-consol
kafka2.x常用命令：创建topic，查看topic列表、分区、副本详情，删除topic，测试topic发送与消费
朱季谦
11-26 4587
kafka2.x常用创建topic，查看topic列表、分区、副本详情，删除topic，测试topic发送与消费指令
Kafka常用命令合集
09-18
### Kafka常用命令合集 #### 1. KafkaServer管理 **1.1 启动KafkaServer** 启动Kafka Server 的命令如下： ```sh bin/kafka-server-start.sh config/server.properties ``` 其中 `config/server.properties` ...
Kafka 常用命令行详细介绍及整理
09-15
以上命令行工具可以帮助开发者和管理员高效地管理和监控 Kafka 集群，包括创建和修改 Topic、启动和停止服务、跟踪消费进度以及监控集群健康状态。了解并熟练使用这些命令是 Kafka 管理和开发的基本技能。在实际使用...
kafka常用操作命令.txt
09-20
通过上述命令，我们可以实现对Kafka集群的基本管理和操作，包括主题的创建、查看、删除，消息的生产和消费，以及Consumer Group的管理等。这些命令是Kafka日常运维和开发工作中不可或缺的部分，掌握它们能够帮助我们...
kafka常用命令归纳
07-13
### Kafka常用命令归纳 #### 一、环境设置与概述 本文档主要针对Kafka的日常运维及开发过程中经常使用的命令进行归纳整理。所涉及的命令适用于以下环境： - **Zookeeper地址**: localhost:2181 - **Bootstrap ...
查看kafka版本_整理了Kafka的一些常用工具，建议收藏备用
weixin_39947016的博客
12-13 757
作者 | 犀牛饲养员责编 | 徐威龙封面付费下载于视觉中国本文主要列举一些 Kafka 的常用工具，以及举了一些例子来帮助理解。有需要的小伙伴，可以 Mark 起来再看。环境以下的操作都是基于kafka_2.11-2.2.0工具新建topicbin/kafka-topics.sh --create --zookeeper 127.0.0.1:2181 --replication-factor 1 ...
Kafka - Topic命令 & 命令行操作
Trollz的博客
10-13 7310
Kafka - Topic Command & Command Line Operations
【原创】Kafka topic常见命令解析
weixin_33725270的博客
06-12 768
本文着重介绍几个常用的topic命令行命令，包括listTopic，createTopic，deleteTopic和describeTopic等。由于alterTopic并不是很常用，本文中就不涉及了。另外本文的代码分析是基于kafka_2.10-0.8.2.1的(虽然截图是Kafka 0.8.1的^_^ )   一. list topic 显示所有topic 1. 从zookeep...
kafka查看topic和消息内容命令
Rocky
12-20 9041
【代码】kafka查看topic和消息内容命令。
kafka常见命令
Stestack的博客
06-13 651
usr/local/kafka/bin/kafka-topics.sh --delete --zookeeper zoo1:2181,zoo2:2181,zoo3:2181 --topic kafka_test 标记为marked for deletion。（3）找到要删除的topic，执行命令：rmr /brokers/topics/【topic name】即可，此时topic被彻底删除。（1）登录zookeeper客户端：命令：./bin/zookeeper-client。1、创建 topic。
查看kafka的topic清单以及topic的内容
wangmiaoyan的博客
11-12 1万+
对于云端服务器上运行着的kafka集群，由于没有开放相关的端口，之前查看都是使用端口转发，ssh练上去之后，使用端口转发，转发到本地查看。 使用kafka时发现，zk连接上之后，里面的Brokers其实是云端服务器的内网，但是kafka tools会直接认为那些ip是本地ip，就会看不到kafka里面的内容。 试来试去，没找到合适的方法解决。如果有谁知道怎么弄，还请告诉我一声，非常感谢~ 回到标题： 先进入容器，然后执行相关命令查看 查看kafka中topic清单：kafka-topics.sh --l
【Kafka学习-3】Kafka命令
weixin_45135482的博客
03-02 2124
Kafka的命令都是基于bin目录下的脚本来使用的。
kafka查看topic列表
05-14
要查看 Kafka 中的所有 topic 列表，可以使用 Kafka 的命令行工具 kafka-topics.sh。在命令行中输入以下命令： ``` kafka-topics.sh --zookeeper <zookeeper_host>:<zookeeper_port> --list ``` 其中，`...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值