Docker安装Kafka

安装步骤：

1、下载zookeeper: docker pull wurstmeister/zookeeper
2、 查看zookeeper镜像是否下载成功：docker images
3、 运行zookeeper: docker run -d --name zookeeper -p 2181:2181 wurstmeister/zookeeper
4、 下载kafka:docker pull wurstmeister/kafka
5、 运行kafka：docker run -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=10.0.227.224:2181/kafka
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.0.227.224:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 wurstmeister/kafka

注:
1>ip为实际场景IP
2>各个参数的释义：
-e KAFKA_BROKER_ID=0 在kafka集群中，每个kafka都有一个BROKER_ID来区分自己
-e KAFKA_ZOOKEEPER_CONNECT=10.0.227.224:2181/kafka 配置zookeeper管理kafka的路径10.0.227.224:2181/kafka
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.0.227.224:9092 把kafka的地址端口注册给zookeeper
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口

---

进入到Kafka目录中：

1、进入kafka容器：docker exec -it kafka /bin/sh
2、进入到/opt/kafka_2.13-2.7.0/bin目录下
3、运行kafka生产者：./kafka-console-producer.sh --broker-list localhost:9092 --topic sun
4、以同样的方式运行kafka消费者：kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic sun --from-beginning

• –bootstrap-server 指定了连接kafka的地址

5.在生产者发送消息以后，能在消费者看到，说明安装成功。
6.添加topic：kafka-topics.sh --create --zookeeper 10.0.227.224:2181/kafka --topic topic-test1 --replication-factor 1 --partitions 2

• –zookeeper指定了kafka连接zookeeper服务地址
• –topic指定了所要创建主题的名称
• –partitions指定了分区的个数
• –replication-factor指定了副本因子
• –create创建主题的动作命令

7.删除topic：kafka-topics.sh --delete --zookeeper 10.0.227.224:2181/kafka --topic sun
8.展示所有的topic: kafka-topics.sh --zookeeper localhost:2181 --list
9.查看主题详情: kafka-topics.sh --zookeeper localhost:2181 --describe --topic sun

---

进入到ZK目录中：

1、 进入到bin目录中：cd /opt/zookeeper-3.4.13/bin
2、进入到zookeeper客户端：./zkCli.sh
3、可以查看根目录上都挂载了哪些节点：ls /
4、查看topic叫sun的分区信息：ls /kafka/brokers/topics/sun/partitions
5、get命令会显示该节点的节点数据内容和属性信息：get /kafka/brokers/topics/sun
6、ls2命令会显示该节点的子节点信息和属性信息：ls2 /kafka/brokers/topics/sun
7、通过命令创建topic和patition：kafka-topics.sh --create --zookeeper 10.0.227.224:2181/kafka --topic topic_test1 --replication-factor 1 --partitions 1
注：replication-factor为主题的副本数，partitions为该主题的broker数量

---

kafka中数据的保存目录：

1、进入到kafka容器中:cd /opt/kafka_2.13-2.7.0/config
2、vim配置文件：vi service.config