Kafka集群模式搭建及代码实战【基于zookeeper】

最新推荐文章于 2024-08-05 15:57:11 发布

神之凝视

最新推荐文章于 2024-08-05 15:57:11 发布

阅读量230

点赞数

分类专栏： Kafka 大数据文章标签： kafka

本文链接：https://blog.csdn.net/qq_27600723/article/details/106097704

版权

本文详细介绍了如何搭建Kafka集群，包括启动Zookeeper集群，配置Kafka的server.properties和producer.properties，以及通过scp命令分发配置文件。在集群中创建了名为spark的分布式topic，并进行了生成者和消费者的测试。生产者和消费者代码运行正常，数据消费从头开始。

摘要由CSDN通过智能技术生成

一.启动zookeeper集群

zookeeper集群搭建参考：zookeeper集群搭建
在这里插入图片描述

备注：一个leader两个follower！

二.Kafka集群模式搭建

1.配置server.properties

############################# Server Basics #############################
broker.id=0

############################# Socket Server Settings #############################
listeners=PLAINTEXT://master:9092

############################# Log Basics #############################
log.dirs=/usr/local/soft/kafka_2.12-2.5.0/logs

############################# Z