docker 安装Kafka集群


前言

提示:这里可以添加本文要记录的大概内容:
例如:随着人工智能的不断发展,机器学习这门技术也越来越重要,很多人都开启了学习机器学习,本文就介绍了机器学习的基础内容。


提示:以下是本篇文章正文内容,下面案例可供参考

一、安装Zookeeper、Kafka

docker pull wurstmeister/kafka
docker pull wurstmeister/zookeeper

二、启动

1.启动Zookeeper

命令如下(示例):

docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

2.启动Kafka

命令如下(示例):

docker run  -d --name kafka \
    -p 9092:9092 \
    -e KAFKA_BROKER_ID=0 \
    -e KAFKA_ZOOKEEPER_CONNECT=10.1.0.171:2181 \
    -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.1.0.171:9092 \
    -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka

-e KAFKA_ZOOKEEPER_CONNECT=10.1.0.171:2181
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.1.0.171:9092
‘10.1.0.171’ 当前服务器ip,不填的话容易找不到服务器,连接异常

3.搭建Kafka集群

docker run  -d --name kafka1 \
    -p 9093:9093 \
    -e KAFKA_BROKER_ID=1 \
    -e KAFKA_ZOOKEEPER_CONNECT=10.1.0.171:2181 \
    -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://10.1.0.171:9093 \
    -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9093 -t wurstmeister/kafka
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
安装kafka集群需要以下步骤: 1. 安装dockerdocker-compose(如果已经安装可以跳过此步)。 2. 创建一个kafka集群docker-compose.yml文件。该文件包含了kafka集群的配置信息,可以参考以下模板: ```yaml version: '2' services: zookeeper: image: wurstmeister/zookeeper ports: - "2181:2181" kafka1: image: wurstmeister/kafka ports: - "9091:9091" environment: KAFKA_ADVERTISED_HOST_NAME: {kafka1的ip地址} KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181 KAFKA_BROKER_ID: 1 KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR: 1 kafka2: image: wurstmeister/kafka ports: - "9092:9092" environment: KAFKA_ADVERTISED_HOST_NAME: {kafka2的ip地址} KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181 KAFKA_BROKER_ID: 2 KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR: 1 ``` 3. 在命令行中进入到包含docker-compose.yml文件的目录,执行以下命令启动kafka集群: ```bash docker-compose up -d ``` 4. 验证kafka集群是否正常运行。可以通过在kafka1或kafka2容器中执行以下命令来创建一个测试主题: ```bash docker exec -it {kafka容器名称} bash ``` ```bash kafka-topics.sh --create --topic test-topic --partitions 3 --replication-factor 2 --zookeeper zookeeper:2181 ``` ```bash kafka-console-producer.sh --topic test-topic --broker-list kafka1:9091,kafka2:9092 ``` ```bash kafka-console-consumer.sh --topic test-topic --bootstrap-server kafka1:9091,kafka2:9092 --from-beginning ``` 以上命令中,kafka容器名称可以通过docker ps命令查看。 5. 如果测试主题创建并且可以正常发送和接收消息,则说明kafka集群已经成功安装并运行。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值