kafka集群操作

最新推荐文章于 2024-08-03 09:08:40 发布

赵广陆

最新推荐文章于 2024-08-03 09:08:40 发布

阅读量252

点赞数

分类专栏： kafka 文章标签： kafka big data java

本文链接：https://blog.csdn.net/ZGL_cyy/article/details/115446793

版权

22 篇文章 6 订阅

订阅专栏

本文详细介绍了如何在Linux服务器上安装Kafka集群，包括Zookeeper依赖、环境搭建步骤、创建与管理topic，生产与消费数据，以及修改和删除topic的配置。通过实例演示了关键操作，适合Kafka初学者和运维人员参考。

摘要由CSDN通过智能技术生成

注意：kafka集群依赖于zk集群，一定要保证zk集群的可用

验证zk集群是否可用：bin/zkServer.sh status 一定要保证出现一个leader，其他的都是follower即可

下载软件安装包并上传服务器

解压安装包然后修改配置文件

将安装包发送到其他服务器，并且修改其他服务器的配置文件

启动服务

bin/kafka-topics.sh --create  --partitions 3 --replication-factor 2 --topic test --zookeeper node01:2181,node02:2181,node03:2181

 bin/kafka-topics.sh --list --zookeeper node01:2181,node02:2181,node03:2181

bin/kafka-console-producer.sh --broker-list node01:9092,node02:9092,node03:9092 --topic test

bin/kafka-console-consumer.sh --from-beginning  --topic test --zookeeper node01:2181,node02:2181,node03:2181

bin/kafka-topics.sh --describe  --topic test --zookeeper node01:2181

bin/kafka-topics.sh --zookeeper node01:2181 --alter --topic test --config flush.messages=1

 bin/kafka-topics.sh --zookeeper node01:2181 --delete --topic test

关注