kafka集群部署安装

准备工作

安装 JDK1.8
创建 zk用户
全程切换到 zk用户
需搭建好Zookeeper集群，参见文章：https://blog.csdn.net/u011125375/article/details/103023393
kafka下载链接：https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.2.0/kafka_2.11-2.2.0.tgz

1. 下载后解压, 全程在/home/zk/目录下操作

tar -zxvf kafka_2.11-2.2.0.tgz

2. 在每台机器上/home/zk/目录下创建

mkdir -p data/kafka

3. 分发kafka安装包到其他机器

scp -r kafka_2.11-2.2.0 192.168.13.129:`pwd`
scp -r kafka_2.11-2.2.0 192.168.13.130:`pwd`

4. 修改每台机器/home/zk/kafka_2.11-2.2.0/config/server.properties 文件

每台机器的log.dir值都为：
log.dir=/home/zk/data/kafka

修改每台机器broker.id属性，值分别为：
broker.id=0、broker.id=1、broker.id=2

给每台机器添加listeners属性，值分别为：
listeners=PLAINTEXT://192.168.13.128:9092
listeners=PLAINTEXT://192.168.13.129:9092
listeners=PLAINTEXT://192.168.13.130:9092

5. 启动kafka

在每台机器执行

cd /home/zk/kafka_2.11-2.2.0
bin/kafka-server-start.sh config/server.properties &

6. 测试kafka

创建topic

bin/kafka-topics.sh --zookeeper 192.168.13.128:2181 --create --topic test --partitions 3 --replication-factor 2

消费topic

bin/kafka-console-consumer.sh --bootstrap-server 192.168.13.128:9092,192.168.13.129:9092,192.168.13.130:9092 --topic test

生产topic

bin/kafka-console-producer.sh --broker-list 192.168.13.128:9092,192.168.13.129:9092,192.168.13.130:9092 --topic test

向pruducer命令行输入几条消息， 若consumer可以成功接受，说明kafka集群正常

Thanks !