kafka集群安装

软件版本

kafka：2.12-2.4.1

前提：zookeeper集群安装成功并启功

具体搭建

第一步：在hcmaster上，下载kafka_2.12-2.4.1，解压到/usr/local/software/目录，同时修改拥有者为root

第二步：在/etc/profile中添加环境变量

第三步：在/usr/local/software/kafka_2.12下创建文件夹data/logs

第四步：修改/usr/local/software/kafka_2.12/conf/server.properties

第五步：分发/usr/local/software/kafka_2.12到hadoop3和hadoop4，修改拥有者同时设置环境变量。

第六步：在hadoop2中修改/usr/local/software/kafka_2.12/config/server.properties

第七步：在hadoop3中修改/usr/local/software/kafka_2.12/config/server.properties

启动集群

依次在三个机器上启动zookeeper

命令：zkServer.sh start

依次在三个机器上启动kafka

命令：kafka-server-start.sh config/server.properties

关闭kafka集群

依次在三个机器上执行命令：

命令：kafka-server-stop.sh stop

注意：启动关闭kafka和zookeeper的顺序，先启动zookeeper再启动kafka，先停止kafka再停止zookeeper