docker安装kafka+zookeeper详细步骤

拉取kafka和zookeeper

docker pull wurstmeister/kafka

docker pull wurstmeister/zookeeper

创建zookeeper容器

docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

建议修改端口号

创建kafka容器

docker run -d --name kafka --publish 9092:9092 --link zookeeper --env KAFKA_ZOOKEEPER_CONNECT=zookeeperip地址:端口 --env KAFKA_ADVERTISED_HOST_NAME=宿主机ip地址 --env KAFKA_ADVERTISED_PORT=kafka要设置的端口号 --env KAFKA_HEAP_OPTS="-Xmx256M -Xms128M" --volume /etc/localtime:/etc/localtime wurstmeister/kafka:latest

 

KAFKA_HEAP_OPTS=”-Xmx256M -Xms128M” 修改内存不足的问题

参数说明：

-e KAFKA_BROKER_ID=0 在kafka集群中，每个kafka都有一个BROKER_ID来区分自己

 

-e KAFKA_ZOOKEEPER_CONNECT=172.16.0.13:2181/kafka 配置zookeeper管理kafka的路径172.16.0.13:2181/kafka

 

-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://172.16.0.13:9092 把kafka的地址端口注册给zookeeper，如果是远程访问要改成外网IP,类如Java程序访问出现无法连接。

 

-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口

 

-v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间

 

--env KAFKA_ADVERTISED_HOST_NAME 改为宿主机器的IP地址，如果不这么设置，可能会导致在别的机器上访问不到kafka。

 

--env KAFKA_ZOOKEEPER_CONNECT 设置zookeeper主机

 

--env KAFKA_ADVERTISED_PORT kafka端口

验证kafka是否可以使用

进入容器

$ docker exec -it kafka bash

进入 /opt/kafka_2.12-2.3.0/bin/ 目录下

$ cd /opt/kafka_2.12-2.3.0/bin/

或者

$ cd /opt/kafka/bin/

运行kafka生产者发送消息

$ ./kafka-console-producer.sh --broker-list localhost:9092 --topic sun

发送消息

> {"datas":[{"channel":"","metric":"temperature","producer":"ijinus","sn":"IJA0101-00002245","time":"1543207156000","value":"80"}],"ver":"1.0"}

运行kafka消费者接收消息

$ ./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic sun --from-beginning

列出所有topics (在本地kafka路径下)

$ bin/kafka-topics.sh --zookeeper localhost:2181 --list

列出所有Kafka brokers

$ docker exec zookeeper bin/zkCli.sh ls /brokers/ids