kafka删除标记删除(marked for deletion)的topic

最新推荐文章于 2024-04-02 14:54:47 发布
最新推荐文章于 2024-04-02 14:54:47 发布
阅读量2.1k 收藏 3
点赞数 2
分类专栏： kafka 文章标签： kafka 分布式 大数据 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011012217/article/details/122188105
版权

前提

按照前一篇文章，配置了kafka。但是研发删除topic还是标记marked for deletion。

过程

1.首先删除各个kafka节点的数据目录的该topic的数据，检查发现已经被删除。

2.连接zookeeper，彻底删除topic（此处以t_f为例），需要删除zookeeper中三个地方

rmr /brokers/topics/t_f  （删除t_f的patition）

rmr /config/topics/t_f  （删除t_f的配置）

rmr /admin/delete_topics/t_f  （删除t_f的标记删除，否则删除重建后还是标记删除）

时间有限这次先分享这些，有问题请多多指正交流。

 

大数据搬砖人
关注
专栏目录
【Kafka】Kafka如何彻底删除Kafka中的topic
九师兄
09-26 2074
工作中因为各种原因， 例如topic中消息堆积的太多，或者kafka所在磁盘空间满了等等，可能需要彻底清理一下kafka topic，那么如何彻底删除topic？在 Apache Kafka 中，当你删除一个主题（Topic）时，主题的删除操作实际上是异步的。Kafka 不会立即删除主题，而是将删除请求添加到一个内部的主题中，该主题称为 __consumer_offsets。这个主题包含了消费者组的偏移量信息，以便 Kafka 知道每个消费者组的消费状态。
Kafka学习笔记之如何永久删除Kafka的Topic
weixin_30746117的博客
08-15 599
0x00 问题描述 使用kafka-topics --delete命令删除topic时并没有真正的删除，而是把topic标记为：“marked for deletion”，导致重新创建相同名称的Topic时报错“already exists”。 0x01问题复现 1. 登录Kafka集群所在的服务器，创建一个test的topic [root@cdh1 ~]# kafk...
彻底删除Kafka中的topic
weixin_38011805的博客
02-02 187
删除kafka存储目录（server.properties文件log.dirs配置，默认为"/tmp/kafka-logs"）相关topic目录 Kafka 删除topic的命令是： ./bin/kafka-topics --delete --zookeeper 【zookeeper server】 --topic 【topic name】 如果kafaka启动时加载的配置文件中server.properties没有配置delete.topic.enable=true，那么此时的删除并不是真..
删除Kafka的Topic（提示：marked for deletion）
kailingr的博客
06-13 1585
kafka存储目录由"server.properties"文件中的"log.dirs"参数指定，默认为"/tmp/kafka-logs"。删除topic时标记删除marked for deletion但未真正的删除。4.继续操作，通过zookeeper客户端zkCli.sh删除。5.查看topics目录下所有topic。7.再次查看topic列表，应该已删除。8.删除kafka存储目录（按需）删除该目录下topic相关目录。2.再次删除topic。6.删除指定topic。
彻底删除Kafka中的Topic（提示：marked for deletion）
混沌人的博客
04-28 9075
问题： kafka删除topic时发现提示只是被标记删除了，并没有真正的删除，如下： [root@lee000 ~]# kafka-topics.sh --delete --zookeeper lee000:2181 --topic my-replicated-topic Topic my-replicated-topic is already marked for deletion. [root...
Kafka topic删除后，提示为- marked for deletion
weixin_38846022的博客
10-25 7815
查看topic信息 ./kafka-topics.sh --list --zookeeper 192.169.2.103:2181 topic后面为marked for deletion，则表示topic没有真正被删除 首先查看kafka配置文件有没有添加 delete.topic.enable=true 没有的话，加上，重启kafka再次查看topic列表是否有删除 如果topic还是为m...
kafka系列之：删除kafka topic报Topic is marked for dele，需要手动删除kafka topic对应的目录数据
zhengzaifeidelushang的博客
01-25 2028
/data/service/kafka/bin/kafka-topics.sh --delete --topic history-debezium-uds-dd_sdi_ods_uds_uds_stg_1h --zookeeper p-qcbj6-dd-hadoop-common-zk-001:2181/kafka Topic history-debezium-uds-dd_sdi_ods_uds_uds_stg_1h is marked for deletion. Note: This will have
Kafka -- 执行删除 Topic 指令后，提示相关 Topic marked for deletion
支棱起来
08-06 2672
删除命令： ./kafka-topics.sh --zookeeper localhost:2181 --delete --topic test 查看命令： ./kafka-topics.sh --zookeeper localhost:2181 --list # 提示 test- marked for deletion 方法一：在 server.properties 中配置 delete.topic.enable=true，之后重启 kafka 方法二： 1、删除 kafka 存储目录（server
实战：kafka删除Topic常见异常排查思路及解决方案
kafka_zsxq的博客
12-03 1766
有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收集线索 报not retrying deletion 异常 版本:kafka_2.11-2.0.0 删除前在执行重分配,但是失败了,强制停止数据迁移,手动删除了节点/admin/reassign_partitions 再次重新删除提示异常Topic test is already marked for deletio
24.永久删除Topic—Kafka
大勇若怯任卷舒
07-20 277
使用kafka-topics --delete命令删除topic时并没有真正的删除，而是把topic标记为： “marked for deletion”，导致重新创建相同名称的Topic时报错“already exists”。 24.1 问题情况 登录Kafka集群所在的服务器，创建一个test的topic [root@cdh1 ~]# kafka-topics --create --zookeeper ip-172-31-1-175.ap-southeast-1.compute.inter.
【Kafka】Kafka 删除topic、然后重建会接着上次消费位置消费吗？
最新发布
九师兄
04-02 501
今天在群里遇到这样一个问题：flink 消费2个kafka topic a,b，状态成功保存在savepoint，途中删掉一个topic a，运行一会再把这个topic a加回来，这时候这个topic a 的状态就无法读取了，会重新消费, 但是偏移量是还保存在kafka _consumer_offsets 里面，有没有办法能让他继续从之前的offset 消费呢？这个问题，我们先拆分一下。
源码解析kafka删除topic
m0_66784575的博客
03-14 2660
本文依然是以kafka0.8.2.2为例讲解 一，如何删除一个topic 删除一个topic有两个关键点： 1，配置删除参数 delete.topic.enable这个Broker参数配置为True。 2，执行 bin/kafka-topics.sh --zookeeper zk_host:port/chroot --delete --topic my_topic_name 假如不配置删除参数为true的话，topic其实并没有被清除，只是被标记为删除。此时，估计一般人的做法是删除topic在Zookeep
kafka单机模式删除某一个topic的数据，并解决Topic xxxx is marked for deletion....报错
呆萌的代Ma
11-03 2572
首先关闭当前topic的生产者与消费者，确保topic不再被使用，否则据说会有bug 进入kafka的目录： cd ~/software/kafka_2.12-2.7.1/bin 查看当前的全部topic： ./kafka-topics.sh --list --zookeeper localhost:2181 删除这个topic： ./kafka-topics.sh --zookeeper localhost:2181 --delete --topic topic的名称 如果出现报错：Topic xx
kafka主题重建
天行健君子以自强不息
02-21 1534
原因：本身kafka主题会有三个副本，但是开发者创建kafka主题时，只是指定了一个副本，而且是任意分配的，所以当重启这台kafka时，应用无法使用该主题，当重启完毕后，需要该主题重建为三个副本. 1、删除kafka存储目录（server.properties文件log.dirs配置，默认为"/tmp/kafka-logs"）相关topic目录 2、Kafka 删除topic的命令是：   ...
kafka删除topic时，显示marked for deletion
h2221892477的博客
10-14 1893
kafka删除topic时，显示marked for deletion
kafka topic 删除
weixin_43172032的博客
12-18 1396
kafka topic 删除方法一：通过kafka 命令来删除方法二：使用zookeeper来删除topic 要删除的topic 名字为 test。 方法一：通过kafka 命令来删除 1.1 通过集群管理工具如ambari设置delete.topic.enable=true delete.topic.enable 1.2 通过kafka命令 删除topic ${KAFKA_HOME}/bin/...
如何删除kafka中marked for deletion的topic
SpringBoy的博客
05-05 1298
如何删除kafka中marked for deletion的topic如何删除kafka中marked for deletion的topic方法1 开启配置项delete.topic.enable=true方法2 Zookeeper中删除 如何删除kafka中marked for deletion的topic 如果Broker中没有开启配置项delete.topic.enable=true，则使用/bin/kafka-topics.sh --delete是不会彻底的删除一个topic，而是把topic的状态
【kafka】彻底删除topic
瘦熊的博客
06-17 714
如果当前topic没有使用过即没有传输过信息：可以彻底删除 如果当前topic有使用过即有过传输过信息：并没有真正删除topic只是把这个topic标记为删除（marked for deletion）。 删除logs，server.properties -> log.dirs=/var/kafka/log/tmp rm -rf /var/kafka/log/tmp/test* 删除k...
kafka0.8.1.1彻底删除topic并清空log内容
陈小资生活小记录
12-17 3269
kafka0.8.1.1以及之前版本都无法使用类似一条命令就彻底删除topic，以前看过网上一些删除命令不过只是在zookeeper注销信息而已，但是实际的日志内容还是保存在kafka log中，因为个人需要所以慢慢琢磨了方法彻底清除topic（ps:kafka0.8.2好像直接支持直接删除，不过现在还是beta版 ）。 本人机器环境如下： Kafka目录：/usr/local/kafka_2
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值