Kafka集群故障恢复

本文详细介绍了如何使用kafka-reassign-partitions.sh工具进行Kafka集群的故障恢复,包括查看当前topic的分配方案,创建话题列表json,生成推荐分配方案,自定义分配方案,执行分区和副本的重新分配,以及验证分配移动是否成功。
摘要由CSDN通过智能技术生成

获取当前kafka指定的topic数据分配方案 ,可以看到有三个分片 , 两个副本
./bin/kafka-topics.sh --zookeeper hrmw-zookeeper-01:2181,hrmw-zookeeper-02:2182,hrmw-zookeeper-03:2183 --describe --topic hrmwAlarmDatav2
    Topic: hrmwAlarmDatav2    Partition: 0    Leader: 3    Replicas: 3,1    Isr: 3,1
    Topic: hrmwAlarmDatav2    Partition: 1    Leader: 1    Replicas: 1,2    Isr: 2,1
    Topic: hrmwAlarmDatav2    Partition: 2    Leader: 2    Replicas: 2,3    Isr: 2,3

#创建一个topic列表json
cat topics-to-move.json 
{
  "topics": [
    {"hrmwAlarmDatav2"},
    {"hrmwRawDatav2"},
    {"hrmwRealDatav2"}
  ],
  "version":1
}

#通过上述的topic 获取到当前的分配方法, 和推荐的分配方案
./bin/kafka-reassign-partitions.sh --zookeeper hrmw-zookeeper-01:2181,hrmw-zookeeper-02:2182,hrmw-zookeeper-03:2183 --topics-to-move-json-file topics-to-move.json --broker-list "2,3" -generate
Current partition replic

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Ward65

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值