Kafka学习笔记 - 02: kafka扩容服务器、重新分区

实验环境:

kafka.broker 0

topic 名为 first 在 broker0 中

默认分区数 partition=1

扩容

在新的物理机上安装 kafka 程序,修改 config/server.properties 文件里的 broker.id 必须在集群中唯一,修改其他必要的配置项,其中 zookeeper.connect 配置项,写上kafka集群现在使用的zookeeper集群的地址。 

然后启动 kafka 就可以加入到集群中了。 

但是新加入的机器只能对新产生的 topic 起作用,对已有的 topic 在没有做处理前,是不会承担任何任务的,所以不会分担集群的压力。

重新分区

假设有一个名为 first 的 topic,只有1个 partition,现在由于存储空间不足,需要重新分区。

修改 topic 的 partitions

./bin/kafka-topics.sh --zookeeper localhost:2181 --alter --topic first --partitions 3

现在 topic 有3个 partition,但是数据还没有迁移过去 

迁移数据

1.生成迁移计划

先手动生成一个 topic.json,内容如下。这里 topic 可以是一个列表,

{
"topics": [
{"topic": "first&#
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值