本文详细介绍了Kafka的Zookeeper启动、配置多个Zookeeper、创建与管理topic、理解replication-factor和partitions，以及如何进行Kafka的扩容和迁移操作。重点讲述了kafka-reassign-partitions.sh命令的使用，包括迁移前后的验证步骤，强调了迁移过程对磁盘IO的影响和分批迁移的策略。
kafka 的zk启动
bin/zookeeper-server-start.shconfig/zookeeper.properties &
Kafka配置多个zookeeper IP
#设置zookeeper，可连接多个zookeeper服务器
zookeeper.connect=192.168.1.100:2182,192.168.1.100:2183192.168.1.100:2184
创建topic
sh kafka-topics.sh --create --zookeeper 192.168.1.100:2182 --replication-factor 1 --partitions 5 --topic skyguo.test
replication-factor表示该topic需要在不同的broker中保存几份，这里replication-factor设置为2,
运行生产者
sh kafka-console-producer.sh --broker-list 192.168.1.100:9093 --topic skyguo.test
其中--broker-list为broker列表
--broker-list <broker-list> REQUIRED: The broker list stringin
theform HOST1:PORT1,HOST2:PORT2.
运行消费者
sh kafka-console-consumer.sh --zookeeper 192.168.1.100:2182 --from-beginning --topicskyguo.test
创建topic
sh kafka-topics
最低0.47元/天 解锁文章
扫一扫
2843
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
