以下命令一定要注意某些位置,是需要写自己的电脑ip地址,盲目的复制粘贴会报错!!
1.kafka依赖于zookeeper(传送门zookeeper与Kafka的关系 - AnswerThe - 博客园),所以需要拉取kafka和zookeeper镜像。
docker pull wurstmeister/kafka
docker pull wurstmeister/zookeeper
2.启动zookeeper容器(wurstmeister/zookeeper镜像拥有默认命令“/usr/sbin/sshd && bash /usr/bin/start-zk.sh”,所以只需启动一个守护式容器即可)
docker run --name zookeeper -p 12181:2181 -d wurstmeister/zookeeper:latest
3.启动三个kafka容器
docker run -p 19092:9092 --name kafka1 -d -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=宿主机IP:12181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://宿主机IP:19092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka:latest
docker run -p 19093:9093 --name kafka2 -d -e KAFKA_BROKER_ID=1 -e KAFKA_ZOOKEEPER_CONNECT=宿主机IP:12181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://宿主机IP:19093 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9093 wurstmeister/kafka:latest
docker run -p 19094:9094 --name kafka3 -d -e KAFKA_BROKER_ID=2 -e KAFKA_ZOOKEEPER_CONNECT=宿主机IP:12181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://宿主机IP:19094 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9094 wurstmeister/kafka:latest
4.分别进入容器kafka1、kafka2、kafka3创建主题test1、test2、test3。下面以kafka3为例。
cd /opt/kafka_2.13-2.8.1/bin #路径不一定是这个名字kafka_2.13-2.8.1,但大致路径是在这里
#在守护式容器中启动一个交互式进程
docker exec -i -t kafka3 /bin/bash
#创建主题test3
./kafka-topics.sh --zookeeper 192.168.1.159:2181 --create --topic test3 --replication-factor 1 --partitions 3
# Created topic "test3"
#查看主题test3
./kafka-topics.sh --zookeeper 192.168.1.159:12181 --describe --topic test3
可以看到,已经是集群环境,可以看到leader机器、副本在分区上的保存情况,和ISR列表成员
5.测试集群,在kafka3上向test1发送消息,在kafka2上消费test1
创造消息
./kafka-console-producer.sh --broker-list 192.168.1.159:19092,192.168.1.159:19093,192.168.1.159:19094 --topic test1
消费消息
./kafka-console-consumer.sh --bootstrap-server 192.168.1.159:19092,192.168.1.159:19093,192.168.1.159:19094 --topic test1 --from-beginning