docker 离线部署 kafka

docker 离线部署 kafka

docker hub在线地址:
kafka镜像地址
zookeeper镜像地址
目录架构
在这里插入图片描述

1、离线安装docker 和 docker-compose

具体请参考一下链接进行安装

docker && docker-compose离线部署

2、下载kafka镜像 (有网环境)

  • 先在有网络的环境下拉取kafka和zookeeper镜像
docker pull bitnami/kafka:latest
docker pull bitnami/zookeeper:latest

3、打包镜像文件到本地

# 参数说明 -o :输出到的文件
docker save bitnami/kafka:latest -o kafka.tar
docker save bitnami/zookeeper:latest -o zookeeper.tar
  • 将kafka.tar 、zookeeper.tar下载到自己本地电脑,在将kafka.tar、zookeeper.tar上传到要部署的内网服务器上

4、将镜像文件导入到内网环境的服务器上(无网内网环境)

# 创建目录
mkdir -p /usr/local/kafka&& cd /usr/local/kafka
# 导入镜像 参数说明 --input , -i : 指定导入的文件
docker load -i kafka.tar
docker load -i zookeeper.tar

5、编写docker-compose.yml文件

vim docker-compose.yml
version: "3"
services:
  zookeeper:
    container_name: zookeeper
    image: 'bitnami/zookeeper:latest'
    ports:
      - '2181:2181'
    environment:
      - ALLOW_ANONYMOUS_LOGIN=yes
    volumes:
      - ./zookeeper:/bitnami/zookeeper:rw
    restart: always
  kafka:
    container_name: kafka
    image: 'bitnami/kafka:latest'
    ports:
      - '9092:9092'
    environment:
      - KAFKA_BROKER_ID=1
      - KAFKA_CFG_LISTENERS=PLAINTEXT://:9092
      - KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://192.168.127.141:9092
      - KAFKA_CFG_ZOOKEEPER_CONNECT=zookeeper:2181
      - ALLOW_PLAINTEXT_LISTENER=yes
      - KAFKA_CREATE_TOPICS=apply:1:1
    depends_on:
      - zookeeper
    volumes:
      - ./kafka:/bitnami/kafka:rw
    restart: always

6、启动 kafka

# 启动
docker-compose up -d
# 关闭
docker-compose down

在这里插入图片描述

7、赋予文件权限

# 赋予文件权限
chmod 777 kafka
chmod 777 zookeeper

在这里插入图片描述

8、关闭防火墙

# centos 麒麟
firewall-cmd --zone=public --add-port=9092/tcp --permanent  && firewall-cmd --reload
firewall-cmd --zone=public --add-port=2181/tcp --permanent  && firewall-cmd --reload
# ubantu
sudo ufw allow 9092
sudo ufw allow 2181
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
1. 在离线机器上下载Kafka压缩包 首先我们需要下载 Kafka 的二进制压缩包,下载地址请前往 Kafka 官网的下载页面下载。选择下载 Kafka 安装包,这里我们选择下载 Kafka 2.11-2.4.1 版本。 2. 解压Kafka压缩包 解压 Kafka 压缩包,将其移至想要安装的目录。 ``` tar -xzvf kafka_2.11-2.4.1.tgz ``` 3. 配置KafkaKafka 安装目录下找到 config/server.properties 文件,使用文本编辑器打开并编辑 ``` vi kafka_2.11-2.4.1/config/server.properties ``` 配置 Kafka 参数: ``` broker.id=0 listeners=PLAINTEXT://your.hostname.com:9092 advertised.listeners=PLAINTEXT://your.hostname.com:9092 log.dirs=/kafka/logs ``` 4. 启动Kafka 首先我们需要启动 Zookeeper: ``` bin/zookeeper-server-start.sh config/zookeeper.properties& ``` 接下来启动 Kafka: ``` bin/kafka-server-start.sh config/server.properties& ``` 5. 创建topic 我们可以通过下面的命令创建一个名为 test1 的 Topic: ``` bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test1 ``` 6. 发送与接收消息 向test1 Topic 发送消息: ``` bin/kafka-console-producer.sh --bootstrap-server localhost:9092 --topic test1 ``` 在终端输入消息并回车即可发送。 从test1 Topic 中接收消息: ``` bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test1 --from-beginning ``` 7. 停止Kafka 首先停止 Kafka: ``` bin/kafka-server-stop.sh ``` 再停止 Zookeeper: ``` bin/zookeeper-server-stop.sh ``` Kafka 的离线安装就是这样了。需要注意的是,Kafka 的不同版本可能存在差异,具体安装过程可能略有不同。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值