kafka topic 删除异常

最新推荐文章于 2022-12-01 18:04:55 发布
最新推荐文章于 2022-12-01 18:04:55 发布
阅读量4.8k 收藏
点赞数
分类专栏： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/woloqun/article/details/106240136
版权

公司kafka集群是允许删除topic，但是前段时间组里小伙伴有个topic总是删不掉，也不知道他是怎么删的；后来我尝试手动删除zookeeper中的元数据，看看能否删掉这个topic,操作如下

rmr /brokers/topics/nginx_clean_error_data
rmr /admin/delete_topics/nginx_clean_error_data

命令执行了，但是zookeeper目录依旧存在，这就有点奇怪了，查看日志发现这个topic自动重建了，这也就是为什么zookeeper中的元数据一直删不掉；那为什么会自动创建？查了下资料，原因大致是，被异常删除的topic，kafka集群会尝试自动重新创建；那如何解决？

也很简单，在配置文件中设置关闭自动创建topic功能

auto.create.topics.enable=false

修改完，依次重启kafka 节点，再次删除zookeeper中改topic的元数据即可

woloqun
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
解决kafka无法删除topic问题
江晓龙的博客
12-17 4832
1.问题描述 使用kafka命令删除某个topic之后，查看集群的topic列表时，被删除的tpoic依然存在 # /data/kafka/bin/kafka-topics.sh --delete --zookeeper zook_ip --topic system Topic system is marked for deletion. Note: This will have no impact if delete.topic.enable is not set to true. [外链图片转存失败,
kafka的topic删除
流的博客
12-21 1133
删除kafka的topic，出现如下提示 [root@mini1 ~]#kafka-topics.sh --delete --zookeeper mini1:2181 --topic test Topic test is marked for deletion. Note: This will have no impact if delete.topic.enable is not set to ...
kafka是如何删除topic的
xianweijian的博客
01-21 569
源码部分 问题： 我们执行delete命令后，看到topic并没有立即被删除，只是打了个deleted的标记。那么kafka是怎么清理这些被打了deleted的topic的。 答： 从源码部分，大概知道，流程应该是在一个fileDeleteDelayMs的周期里边，kafka会先删除数据，在情况所有数据都被删除后（logsToBeDeleted.isEmpty），在下一个fileDeleteDelayMs周期，就会调用removedLog.delete()方法把partition删除。达到删除topic的目
Kafka的主题删除机制
AlgoRain的博客
09-14 792
Kafka的主题删除机制 命令删除 在Kafka中当一个主题不再使用的时候，可以选择将其删除，以此来释放磁盘，文件句柄等资源，删除过程其实很简单，使用kafka-topics.sh脚本中的delete指令就可以。 bin/kafka-topics.sh --zookeeper localhost:2181/kafka --delete --topic topic-delete 在删除完毕后，会有相应的提示信息，提示信息与broker端配置参数delete.topic.enable有关，必须将delete.
kafka删除topic消息的四种方式
新技术革命
01-25 2万+
方法一：快速配置删除法（简单粗暴，如果这个主题有程序还在消费都，此时KAFKA就game over） 1.kafka启动之前，在server.properties配置delete.topic.enable=true 2.执行命令bin/kafka-topics.sh --delete --topic test --zookeeper zk:2181或者使用kafka-manager集群管理工具删除 注意：如果kafka启动之前没有配置delete.topic.enable=true，topic只会标记
kafka-manager管理工具
07-11
- **集群管理**：Kafka-Manager允许用户添加、删除和查看Kafka集群的详细信息，如 brokers、topics、partitions 和 replication factors 等。 - **主题管理**：用户可以通过Kafka-Manager创建、删除和修改主题，...
kafka-2.13-3.7.0.tgz
最新发布
04-08
1. **主题（Topic）**：主题是Kafka中的消息类别，类似于数据库中的表。每个主题可以被划分为多个分区（Partitions）。 2. **分区（Partition）**：分区是主题的逻辑细分，每个分区在物理上存储在一个broker...
kafka eagle 可视化工具压缩包
06-20
2. **管理操作**：支持创建、修改和删除 Topic，以及调整 Partition 数量。同时，还能管理 Consumers 和Brokers，满足日常运维需求。 3. **性能分析**：提供详细的性能指标，如消息生产与消费速率、延迟时间等，...
kafka eagle 1.4.8安装包kafka eagle 1.4.8
07-02
4. **报警设置**: 可自定义配置报警阈值，当Kafka集群出现异常时，及时通知管理员。 5. **性能优化**: 提供多种性能分析工具，帮助优化Kafka集群性能。 **二、安装步骤** 1. **环境准备** - 确保已安装Java运行...
kafka 监控工具
08-18
2. **主题管理**：创建、删除和修改主题配置，如分区数、副本数等。 3. **消费者组管理**：查看消费者组的详细信息，包括消费进度和滞后情况。 4. **性能监控**：监控broker、topic和consumer的性能指标，如吞吐量、...
kafka主题删除_【Kafka】Kafka topic主题删除不了
weixin_39734184的博客
12-19 1744
前言利用kafka命令删除topic不成功。kafka-topics.sh --zookeeper hadoop111:2181 --delete --topic test原因&解决方式1. 配置文件未将delete.topic.enable=true，导致删除命令未及时生效；解决方式：第一种：找到conf目录下server.properties配置文件，修改delete.topic.en...
实战：kafka删除Topic常见异常排查思路及解决方案
kafka_zsxq的博客
12-03 1707
有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收集线索 报not retrying deletion 异常 版本:kafka_2.11-2.0.0 删除前在执行重分配,但是失败了,强制停止数据迁移,手动删除了节点/admin/reassign_partitions 再次重新删除提示异常Topic test is already marked for deletio
kafka删除topic数据
热门推荐
shykevin的博客
01-29 3万+
kafka删除topic数据 一、概述 生产环境中，有一个topic的数据量非常大。这些数据不是非常重要，需要定期清理。 要求：默认保持24小时，某些topic 需要保留2小时或者6小时 二、清除方式 主要有3个： 1. 基于时间 2. 基于日志大小 3. 基于日志起始偏移量 详情，请参考链接： https://b...
Kafka删除topic
桃花惜春风
08-21 1万+
两种方法： 一、修改配置文件server.properties 添加如下配置： delete.topic.enable=true 说明：官方给的文档说明“Enables delete topic. Delete topic through the admin tool will have no effect if this config is turne
删除kafka topic后再重新建同名topic
weixin_39001364的博客
11-08 7855
首先确保 delete.topic.enable=true 第一步：bin/kafka-topics --zookeeper zookeeper集群 --delete --topic topicName 第二步：进入zookeeper命令行，删除三个目录①rmr /brokers/topics/market ②rmr /admin/delete_topics/market ③
【Kafka】删除Topic导致Broker重启失败
扬_帆_起_航
12-01 999
分享问题案例不是本文的重点,重点是与众多Kafka爱好者分享从实战中总结出的方法。
kafka服务中删除topic的详细流程，解决经常遇到删不清topic导致的kafka服务异常问题
qq584854122的博客
04-23 1593
1.应用需要在停止的状态下 2.确保delete.topic.enable=true，官方文档中标注该属性默认为true 3.执行kafka-topics.sh --zookeeper 127.0.0.1:2181 --delete --topic tpName （kafka服务会自动关闭） 4.删除zk节点上被标注的节点 rmr /brokers/topics/tpName rmr /admin...
如何彻底删除Kafka中的topic (marked for deletion)
russle的专栏
09-28 2万+
工作中因为个中原因可能需要彻底清理一下kafka topic，那么如何彻底删除topic？ 方法一（配置delete.topic.enable=true）   修改kafaka配置文件server.properties， 添加delete.topic.enable=true，重启kafka，之后通过kafka命令行就可以直接删除topic   通过命令行删除topic：     ./bin/kaf...
kafka删除topic
08-09
要在Kafka中删除一个topic，你可以按照以下步骤进行操作： 1. 确保你有对Kafka集群的管理权限。 2. 在任意一个Kafka服务器上打开终端或命令提示符窗口。 3. 使用kafka-topics.sh脚本（或kafka-topics.bat脚本，...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值