万字长文解析删除Topic流程领导再也不用担心我排查生产环境问题了(附教学视频,建议收藏!!!)

最新推荐文章于 2024-06-26 11:55:02 发布
最新推荐文章于 2024-06-26 11:55:02 发布
阅读量1.3w 收藏 75
点赞数 77
分类专栏： Kafka 文章标签： kafka 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010634066/article/details/119720170
版权
本文详细解析了Kafka中删除Topic的完整流程，包括客户端命令、Controller处理、源码分析及常见问题解答。通过 ZooKeeper 和 Broker 的交互，深入理解Topic删除的每个步骤，确保在生产环境中顺利进行问题排查。
摘要由CSDN通过智能技术生成

该文章可能已过期,已不做勘误并更新,请访问原文地址(持续更新) 万字长文解析删除Topic流程领导再也不用担心我排查生产环境问题了(附教学视频,建议收藏!!!)

在这里插入图片描述

【源码】Topic删除流程分析+常见问题

日常运维 、问题排查 怎么能够少了滴滴开源的
滴滴开源LogiKM一站式Kafka监控与管控平台

文章目录

了解本专栏 订阅专栏 解锁全文 超级会员免费看
石臻臻的杂货铺
关注
专栏目录
订阅专栏
源码解析kafka删除topic
m0_66784575的博客
03-14 2631
本文依然是以kafka0.8.2.2为例讲解 一，如何删除一个topic 删除一个topic有两个关键点： 1，配置删除参数 delete.topic.enable这个Broker参数配置为True。 2，执行 bin/kafka-topics.sh --zookeeper zk_host:port/chroot --delete --topic my_topic_name 假如不配置删除参数为true的话，topic其实并没有被清除，只是被标记为删除。此时，估计一般人的做法是删除topic在Zookeep
删除kafka 残余topics
jxhaha的博客
03-09 940
Delete topic folder from Kafka broker machine. 利用kafka/bin/topics –delete删除 一般重启或者过段时间，kafka会自动剔出。 这里要说的是，kafka意外死亡，或者不停的更换topics，以至于不知道一些topics位于哪个broker下面，导致一些残余topics。只被标记成marked for delete。却
Kafka topic消息清理几种方式
jiayu的博客
06-26 2558
执行命令bin/kafka-topics.sh --delete --topic test --zookeeper zk:2181或者使用kafka-manage集群管理工具删除。参考链接：https://cloud.tencent.com/developer/article/1590094。，只需要修改server.properties配置文件的delete.topic.enable为true就可以了。kafka启动之前，在server.properties配置。
Kafka清除topic及相关数据
Blossom
11-23 2057
1. 停止该kafka相关的producer和consumer。 2. 设置如下kafka的配置项： # yitian added auto.create.topics.enable=false delete.topic.enable=true 3. 调用kafka删除topic的命令： yitian@kafka:~/kafka/kafka_2.11-0.8.2.1$ bin/kaf...
kafka如何彻底删除topics
weixin_41186141的博客
02-16 247
kafka如何彻底删除topics1、配置delete.topic.enable=true2、没有配置delete.topic.enable=true3、被标记为marked for deletion的topic4、删除kafka topic后再重新建同名topic5、参考文档 1、配置delete.topic.enable=true 修改kafaka配置文件server.properties，...
Kafka删除Topic的过程:
多哥仁慈的骆驼
09-09 727
1. Kafka的broker在被选举成controller后，会执行下面几步 1.1 注册DeleteTopicsListener，监听zookeeper节点/admin/delete_topics下子节点的变化，delete命令实际上就是要在该节点下创建一个节点，名字是待删除topic名，标记该topic是待删除的 1.2 创建一个单独的线程DeleteTopicsThread，...
CSDN独家首发！万字长文，YOLOv5_v7_v8算法模型yaml文件史上最详细解析与教程！.mhtml
最新发布
09-19
CSDN独家首发！万字长文，YOLOv5_v7_v8算法模型yaml文件史上最详细解析与教程！.mhtml
数据治理怎么做？这篇万字长文终于讲清楚了!.docx
06-17
数据治理是现代企业，尤其是银行业，应对风险管理和价值创造挑战的关键策略。随着互联网技术的发展，银行...在互联网时代，银行业必须重视数据治理，将其视为核心竞争力的一部分，以应对日益复杂的数据环境和客户需求。
Kafka如何删除topic？
weixin_34199335的博客
12-12 101
Kafka如何删除topic？     今天为大家带来“Kafka删除topic原理解析”，希望可以帮到那些苦于无法删除topic的朋友们。      前提条件： 在启动broker时候开启删除topic的开关，即在server.properties中添加：  delete.topic.enable=true 命令： bin/kafka-topics.sh --zookeeper zk_ho...
【Kafka】如何彻底删除topic
Diligent_ten的博客
04-24 354
1、删除kafka存储目录（server.properties文件log.dirs配置，默认为”/tmp/kafka-logs”）相关topic目录 2、Kafka 删除topic的命令是： kafka/bin/kafka-topics.sh --delete --zookeeper Zookeeper地址 --topic 主题名称 如果kafaka启动时加载的配置文件中server.pro...
kafka删除topic数据
u011250186的博客
11-14 3492
kafka删除topic数据 一、概述 生产环境中，有一个topic的数据量非常大。这些数据不是非常重要，需要定期清理。 要求：默认保持24小时，某些topic 需要保留2小时或者6小时 二、清除方式 主要有3个： 1. 基于时间 2. 基于日志大小 3. 基于日志起始偏移量 详情，请参考链接： https://blog.csdn.net/u013256816/article/details/80418297 接下来，主要介绍基于时间的清除！ kafka版本为: 2.11-..
kafka中彻底删除topics
SZStudy的博客
04-05 855
第一步(确保 zookeeper,kafka已经启动)    kafka-topics.sh --zookeeper localhost:2181 --delete --topic (topics名称)第二步，删除相关文件    ①   进入zookeeper客户端（$ZK_HOME/bin/zkcli.sh）          输入命名查看是否存在你要删除的topics    ls /broke...
kafka删除topic
云无痕的博客
03-28 307
运行./kafka-topics.sh -delete -zookeeper [zookeeper server] -topic [topic name]；如果kafka启动时加载的配置文件server.properties没有配置delete.topic.enable = true,那么此时的删除并不是真正的删除。而只是把topic标记为：marked for deletion,此时就需要执行下...
KafkaController机制（六）：Zookeeper Listener之TopicDeletionManager与DeleteTopicsListener
lianggx3的博客
09-25 281
KafkaCtroller会通过Zookeeper监控整个kafka集群的运行状。 TopicChangeListener负责管理topic的增删，监听/brokers/topics节点的子节点变化。 /** * This is the zookeeper listener that triggers all the state transitions for a partition...
kafka之三----Controller职责之主题删除
枫火的博客
09-08 275
Controller 注册TopicDeletionListener监听器，监听ZK的/admin/delete_topics节点，定义了 TopicDeletionHandler，用它来实现对删除主题的监听，用来实际执行删除Topic的动作。
实战：kafka删除Topic常见异常排查思路及解决方案
kafka_zsxq的博客
12-03 1739
有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收集线索 报not retrying deletion 异常 版本:kafka_2.11-2.0.0 删除前在执行重分配,但是失败了,强制停止数据迁移,手动删除了节点/admin/reassign_partitions 再次重新删除提示异常Topic test is already marked for deletio
Kafka的主题删除机制
AlgoRain的博客
09-14 798
Kafka的主题删除机制 命令删除 在Kafka中当一个主题不再使用的时候，可以选择将其删除，以此来释放磁盘，文件句柄等资源，删除过程其实很简单，使用kafka-topics.sh脚本中的delete指令就可以。 bin/kafka-topics.sh --zookeeper localhost:2181/kafka --delete --topic topic-delete 在删除完毕后，会有相应的提示信息，提示信息与broker端配置参数delete.topic.enable有关，必须将delete.
csdn独家首发!万字长文,yolov5/v7/v8算法模型yaml文件史上最详细解析与教程
11-03
这篇万字长文是针对YOLOv5/v7/v8算法模型的yaml文件进行的详细解析与教程，专门为CSDN独家发布。在该文中，作者首先对YOLOv5/v7/v8算法模型的基本原理进行了介绍，包括物体检测和边界框回归等核心概念。然后，作者...
评论 114
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

石臻臻的杂货铺

不用打赏,加微信,交个朋友就好

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值