删除kafka topic后再重新建同名topic

最新推荐文章于 2024-08-21 17:49:07 发布

weixin_39001364

最新推荐文章于 2024-08-21 17:49:07 发布

阅读量7.9k

点赞数

分类专栏： kafka

本文链接：https://blog.csdn.net/weixin_39001364/article/details/78475853

版权

在Kafka中删除并重建同名topic，需要设置`delete.topic.enable=true`，然后通过`kafka-topics`命令删除topic，接着在Zookeeper中手动清理相关目录，包括/brokers/topics/market、/admin/delete_topics/market和/config/topics/market。重启Kafka后，可以重建同名topic。

摘要由CSDN通过智能技术生成

 
 首先确保  
 delete.topic.enable=true 

 
 第一步：bin/kafka-topics --zookeeper zookeeper集群 --delete --topic topicName 

 
 第二步：进入zookeeper命令行，删除三个目录①rmr /brokers/topics/market ②rmr /admin/delete_topics/market ③rmr /config/topics/market

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_39001364

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

【Kafka】Kafka 删除topic、然后重建会接着上次消费位置消费吗？

九师兄

04-02

483

今天在群里遇到这样一个问题：flink 消费2个kafka topic a,b，状态成功保存在savepoint，途中删掉一个topic a，运行一会再把这个topic a加回来，这时候这个topic a 的状态就无法读取了，会重新消费, 但是偏移量是还保存在kafka _consumer_offsets 里面，有没有办法能让他继续从之前的offset 消费呢？这个问题，我们先拆分一下。

kafka删除topic后再创建同名的topic报错（ERROR org.apache.kafka.common.errors.TopicExistsException）...

weixin_30297281的博客

07-13

2748

[hadoop@datanode3 logs]$ kafka-topics.sh --delete --zookeeper datanode1:2181 --topic firstTopic first is marked for deletion.Note: This will have no impact if delete.topic.enable is not set to tr...

参与评论您还未登录，请先登录后发表或查看评论

Kafka篇之清理或创建topic

最新发布

小橙子的笔记屋

08-21

760

kafka创建或清理topic

kafka主题重建

天行健君子以自强不息

02-21

1519

原因：本身kafka主题会有三个副本，但是开发者创建kafka主题时，只是指定了一个副本，而且是任意分配的，所以当重启这台kafka时，应用无法使用该主题，当重启完毕后，需要该主题重建为三个副本. 1、删除kafka存储目录（server.properties文件log.dirs配置，默认为"/tmp/kafka-logs"）相关topic目录 2、Kafka 删除topic的命令是： ...

【帖子】怎么彻底删除kafka的topic，然后重建？

weixin_34414196的博客

09-26

797

怎么彻底删除kafka的topic，然后重建？网上都说用kafka-run-class.shkafka.admin.DeleteTopicCommand 命令删除topic，但是并没有成功，用kafka-topics.sh命令查看依然可以查看到topic，应该怎样才能彻底删除topic？ 2016-01-01 添加评论分享 2...

kafka删除和创建topic

小海的专栏

12-02

3488

kafka操作topic的方法： 1、查看topic列表： bin/kafka-topics.sh --zookeeper node1:port,node2:port,node3:port/kafkachroot --list 2、删除topic : 1) bin/kafka-topics.sh --zookeeper node1:port

记一次kafka集群删除数据后，恢复过程

xzhongb的博客

11-04

3009

问题：由于kafka 中log.dir文件目录占用空间太大，而且文件名字是logs，以为是日志文件，直接一挥手把他全部删除了。导致集群连接成功，但是出现找不到broker等问题。解决问题过程：zk元数据信息没有保存kafka内容，想着把所有topic删掉。所以通过命令把kafka的topic进行删除，但是没有用，集群还是有问题。问题答案：将zk的目录重新修改一个，然后关掉kafka进程，然后把kafka数据目录删除，重新创建一个文件夹，重启启动kafka就可以了。相当于重新创建一遍元数据信息。 ..

kafka topic迁移脚本

11-11

3. **创建新Topic**：在目标集群中创建与源Topic同名的新Topic，确保其配置与源Topic相同。 4. **数据复制**：这是迁移的核心步骤，可以使用工具如`kafka-console-consumer`和`kafka-producer-console`，或者自定义...

@KafkaListener通过配置加载多个topic

mrxiky的专栏

02-19

1万+

接到领导的一个需求，希望封装一下kafka的消费者，可以从配置读取topic进行消费；一开始首先想到的是用java kafka的高阶api手工根据topic创建消费者，一个topic创建一个消费者，依赖zookeeper完成kafka内部的balance和其他管理。后来领导又提出不要依赖zookeeper，之前老是rebalance失败。调研了一下，手工实现类似sp...

Kafka Shell基本命令,Kafka topic常见命令解析

语不惊人死不休

02-24

7929

Kafka topic常见命令解析本文着重介绍几个常用的topic命令行命令，包括listTopic，createTopic，deleteTopic和describeTopic等。由于alterTopic并不是很常用，本文中就不涉及了。另外本文的代码分析是基于kafka_2.10-0.8.2.1的(虽然截图是Kafka 0.8.1的^_^ ) 一. list topic 显示所有topic1. 从...

kafka_topic创建、分区、删除管理

11-23

kafka管理工具，主要用于创建、删除、查看管理topic信息

彻底删除Kafka中的topic

热门推荐

fengzheku的专栏

01-26

6万+

1、删除kafka存储目录（server.properties文件log.dirs配置，默认为"/tmp/kafka-logs"）相关topic目录 2、Kafka 删除topic的命令是： ./bin/kafka-topics --delete --zookeeper 【zookeeper server】 --topic 【topic name】如果kafaka启动时

kafka0.8.1.1彻底删除topic并清空log内容

陈小资生活小记录

12-17

3259

kafka0.8.1.1以及之前版本都无法使用类似一条命令就彻底删除topic，以前看过网上一些删除命令不过只是在zookeeper注销信息而已，但是实际的日志内容还是保存在kafka log中，因为个人需要所以慢慢琢磨了方法彻底清除topic（ps:kafka0.8.2好像直接支持直接删除，不过现在还是beta版）。本人机器环境如下： Kafka目录：/usr/local/kafka_2

Kafka Topic Resume Deletions （Kafka Topic恢复删除的过程）

helowken2的博客

08-22

3022

恢复删除Topic的过程

kafka彻底删除topic

鸭梨的博客

12-31

833

删除topic一般是下面这样的,但是这样是删不掉的,只是标记为删除,再次创建同名topic还是会报错,topic已经存在. kafka-topics.sh \ --zookeeper mypc01:2181,mypc02:2181,mypc03:2181/kafka \ --delete \ --topic pet 首先 server.properties 设置 delete.topic.enable=true 删除kafka存储目录（server.properties文件log.dirs配置，默认为"/

60-30-012-使用-Kafka不停机删除topic数据（自动建立topic）md

九师兄

01-07

417

1.视界 2.背景一次客户有这么一个需求 kafka在不停机的情况下如何清理掉 kafka中的topic数据？ 3.第一种测试直接删除log日志为了验证我本地测试。启动kafka (base) lcc@lcc kafka_2.11-1.1.0$ sh bin/kafka-server-start.sh config/server.properties 启动生产者 ^C(base) lcc@lcc kafka_2.11-1.1.0$ sh bin/kafka-console-producer.s

Kafka topic常用命令查看创建修改彻底删除topic（删除数据目录和在zk上的信息）

是个好男人的博客

09-17

8860

1.创建topic 命令格式：注意空格 ./kafka-topics.sh --create --topic topic名称--partitions分区数--replication-factor备份数--zookeeperZooKeeper的任意一个节点或者全部的IP:Port/kafka 示例： ./kafka-topics.sh --zookeeper 192.168.61.102:24002,192.168.61.202:24002,192.168.61.104:24002/ka...

kafka单机模式删除某一个topic的数据，并解决Topic xxxx is marked for deletion....报错

呆萌的代Ma

11-03

2565

首先关闭当前topic的生产者与消费者，确保topic不再被使用，否则据说会有bug 进入kafka的目录： cd ~/software/kafka_2.12-2.7.1/bin 查看当前的全部topic： ./kafka-topics.sh --list --zookeeper localhost:2181 删除这个topic： ./kafka-topics.sh --zookeeper localhost:2181 --delete --topic topic的名称如果出现报错：Topic xx

Kafka源码深入：Topic删除原理与关键类剖析

本篇文章是关于Apache Kafka源码系列教程中的一项重要内容，即删除Kafka主题（Topic）的操作。Kafka作为一款高效的分布式消息系统，常用于大规模消息处理场景，具有高吞吐量、分区、数据复制和容错性。首先，删除...