KAFKA删除topic

最新推荐文章于 2023-07-28 08:51:16 发布
最新推荐文章于 2023-07-28 08:51:16 发布
阅读量505 收藏
点赞数
文章标签： KAFKA 删除topic
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/twk0931/article/details/44656149
版权

kafka的topic删除一直是个比较坑的问题，在某次创建了错误的topic的时候，在删除后发现日志报错一直在寻找已删除的topic。

解决后记录下。


操作步骤1：删除在ZK中的KAFAK的TOPIC记录

./kafka-run-class.shkafka.admin.DeleteTopicCommand --zookeeper 172.18.1.28:2181 --topic coupon

删除后，数据仍然存在并且replication-offset-checkpoint中存有该topic记录。


接下来的操作需要停止kafka。

操作步骤2：修改replication-offset-checkpoint

删除replication-offset-checkpoint中该topic的行，并将修改该节点的topic总数为删除后的数量。


操作步骤3：删除所有该topic的partition



OVER

二十一个西瓜
关注
【Kafka】Kafka 删除topic、然后重建会接着上次消费位置消费吗？
九师兄
04-02 469
今天在群里遇到这样一个问题：flink 消费2个kafka topic a,b，状态成功保存在savepoint，途中删掉一个topic a，运行一会再把这个topic a加回来，这时候这个topic a 的状态就无法读取了，会重新消费, 但是偏移量是还保存在kafka _consumer_offsets 里面，有没有办法能让他继续从之前的offset 消费呢？这个问题，我们先拆分一下。
kafka 删除topic 不成功
我还是个菜鸟
01-03 2747
利用kafka命令删除topic不成功。 kafka-topics.sh --zookeeper hadoop111:2181 --delete --topic test 原因&解决方式1. 配置文件未将delete.topic.enable=true，导致删除命令未及时生效；解决方式：第一种：找到conf目录下server.properties配置文件，修改delete.topic.enable=true，代表删除立即生效；[ssrs@hadoop111 config]$ pwd /opt/mod
实战：kafka删除Topic常见异常排查思路及解决方案
kafka_zsxq的博客
12-03 1737
有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收集线索 报not retrying deletion 异常 版本:kafka_2.11-2.0.0 删除前在执行重分配,但是失败了,强制停止数据迁移,手动删除了节点/admin/reassign_partitions 再次重新删除提示异常Topic test is already marked for deletio
kafka删除topic的方法
weixin_34013044的博客
09-02 118
0.8的官方文档提供了一个删除topic的命令：kafka-topics.sh --delete 但是在运行时会报错找不到这个方法。kafka-topics.sh最终是运行了kafka.admin.TopicCommand这个类，在0.8的源码中这个类中没有找到有delete topic相关的代码。在kafka的admin包下，提供了一个DeleteTopicCommand的...
kafka监控命令kafka-run-class.sh查看消费了多少条数据
热门推荐
小强签名设计 的博客
06-28 4万+
kafka自带了很多工具类，在源码kafka.tools里可以看到： 源码包下载地址：http://archive.apache.org/dist/kafka/ 这些类该如何使用呢，kafka的设计者早就为我们考虑到了，在${KAFKA_HOME}/bin下，有很多的脚本，其中有一个kafka-run-class.sh，通过这个脚本，可以调用其中的tools的部分功能，如调用kafk...
kafka常用命令
comprel的博客
03-18 430
添加环境变量： vi ~/.bash_profile PATH=$PATH:$HOME/bin:/app/kafka_2.11-2.2.0/bin export PATH kafka在bin目录下提供的一些工具： kafka-acls.sh kafka-preferred-replica-election.sh kafka-broker-api-v...
Kafka 删除topic
paulfrank_zhang的博客
03-29 241
删除topic里面的数据 这里没有单独的清空数据的命令，这里要达到清空数据的目的只需要以下步骤： 一、如果当前topic没有使用过即没有传输过信息：可以彻底删除。 二、 如果当前topic有使用过即有过传输过信息：并没有真正删除topic只是把这个topic标记为删除（markedfordeletion）。想要彻底删除topic数据要经过下面两个步骤： ①：删除topic,重新用创建t...
kafka实战 - 删除topic
aong5154的博客
11-27 832
概述 　　在平时对kafka的运维工作中，我们经常会由于某些原因去删除一个topic，比如这个topic是测试用的，生产环境中需要删除。或者我想扩容topic的同时，这个topic中的数据我不想要了，这时候删除topic，增加broker，再重新创建topic就会是比较简单的方法。但是kafka删除topic时，有很多关键的点必须清楚，否则在删除topic的时候就会出现各种各样的问题。...
【实战】kafka删除Topic常见异常排查思路及解决方案
石臻臻的杂货铺(szzdzhp001)
09-14 6322
有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收集线索 报not retrying deletion 异常 版本:kafka_2.11-2.0.0 删除前在执行重分配,但是失败了,强制停止数据迁移,手动删除了节点/admin/reassign_partitions 再次重新删除提示异常Topic test is already marked for deletion 所有Broke
kafka常用shell命令总结
qq_43536701的博客
12-14 935
1、创建kafka topic kafka-topics.sh --zookeeper node01:2181 --create --topic t_Name --partitions 30 --replication-factor 2 注： partitions指定topic分区数，replication-factor指定topic每个分区的副本数 partitions分区数: partitions ：分区数，控制topic将分片成多少个log。可以显示指定，如果不指定则会使用broker(server
Kafka--批量删除所有topic(或删除以 xxx 为开头的topic)
justlpf的专栏
06-08 1369
【代码】Kafka--批量删除所有topic(或删除以 xxx 为开头的topic)
kafka主题删除_【Kafka】Kafka topic主题删除不了
weixin_39734184的博客
12-19 1765
前言利用kafka命令删除topic不成功。kafka-topics.sh --zookeeper hadoop111:2181 --delete --topic test原因&解决方式1. 配置文件未将delete.topic.enable=true，导致删除命令未及时生效；解决方式：第一种：找到conf目录下server.properties配置文件，修改delete.topic.en...
进击消息中间件系列（三）：Kafka 中 shell 命令使用
民工哥的博客
07-28 565
点击下方名片，设为星标！回复“1024”获取2TB学习资源！前面介绍了 Kafka 的基础概念与架构、单机与集群部署相关的知识点，今天我将详细的为大家介绍 Kafka 中shell 命令使用相关知识，希望大家能够从中收获多多！如有帮助，请点在看、转发支持一波！！！创建 kafka topickafka-topics.sh--zookeepernode01:2181--create--top...
KAFKA删除topic步骤
cloudsmile的博客
06-09 4947
以下删除kafka主题的方法在Windows环境下测试通过
如何导出zk中的偏移量（offsets）
桃花惜春风
09-01 3822
我们在使用kafka的过程中，可能需要把某个group中的偏移量offset导出来查看。下面提供一种把偏移量从zookeeper中导出来的方法。 执行命令 bin/kafka-run-class.sh kafka.tools.ExportZkOffsets 我们可以看到都需要哪些参数 执行如下命令导出group1中的偏移量信息 bin/kafka-run-class
Kafka 应用
通往神秘的道路的专栏
01-31 599
1、命令行工具 Kafka 中提供了许多命令行工具（位于$KAFKA_HOME/bin 目录下）用于管理集群的变更。 脚本名称 释义 kafka-configs.sh 用于配置管理，在4.1.5节和4.3.3节中有所提及 kafka-console-consumer.sh 用于消费消息，在1.3节和7.3节中有所提及 kafka-console-producer.sh 用于生产消息，在1.3节中有所提及 kafka-consumer-perf-test.sh 用于测试消费性能，在
Kafka 常用命令
玖涯博客
03-11 1万+
本文以 kafka_2.5.1 版本为例，描述的常用命令，在 3.x 版本上命令有所不同。
kafka删除主题数据和删除主题
forrest_ou的博客
01-08 1万+
kafka使用confluent-3.1.2      删除的主题名：test 1、删除主题 在server.properties中增加设置，默认未开启 delete.topic.enable=true删除主题命令 /bin/kafka-topics --delete --topic test --zookeeper localhost:2181 2、删除主题数据 如果想保留主题，只删
kafka删除topic
最新发布
08-09
要在Kafka中删除一个topic，你可以按照以下步骤进行操作： 1. 确保你有对Kafka集群的管理权限。 2. 在任意一个Kafka服务器上打开终端或命令提示符窗口。 3. 使用kafka-topics.sh脚本（或kafka-topics.bat脚本，如果你在Windows上运行）来执行删除操作。命令的格式如下： ``` kafka-topics.sh --zookeeper <zookeeper_host>:<zookeeper_port> --delete --topic <topic_name> ``` 将`<zookeeper_host>`替换为你的ZooKeeper服务器的主机名或IP地址，将`<zookeeper_port>`替换为ZooKeeper服务器的端口号，默认为2181。将`<topic_name>`替换为你要删除的topic的名称。 4. 运行以上命令后，Kafka将会删除指定的topic。请注意，这个操作是不可逆的，删除后数据将无法恢复，请谨慎操作。 这就是在Kafka中删除一个topic的步骤。请确保在执行这个操作之前，对数据进行备份或确认不再需要该topic中的数据。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值