docker-compose部署emqx集群（三节点，nginx做TCP的负载均衡）

已于 2022-07-11 15:43:42 修改
阅读量3.3k 收藏 5
点赞数 1
分类专栏： # 03-docker-compse启动常用服务 # 常用服务-emqx 文章标签： docker emqx集群 docker-compose nginx代理TCP
于 2022-07-03 20:13:57 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xingzuo_1840/article/details/125587679
版权

文章目录

1. 环境说明

节点IP
emqx0110.10.239.31
emqx0210.10.239.116
emqx0310.10.239.84

2. emqx集群部署

2.1 emqx01

网络需要使用host模式

  • docker-compose.yml 文件
version: '3'
services:
  emqx1:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx01
    - EMQX_HOST=10.10.239.31
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx01@10.10.239.31, emqx02@10.10.239.116,emqx03@10.10.239.84
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    network_mode: "host"
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
  • 启动
[root@liubei-01 emqx01]# docker-compose up -d
  • 查看结果
[root@liubei-02 emqx01]# docker-compose ps
     Name                   Command                  State       Ports
----------------------------------------------------------------------
emqx01_emqx1_1   /usr/bin/docker-entrypoint ...   Up (healthy)

2.1 emqx02

网络需要使用host模式

  • docker-compose.yml 文件
version: '3'
services:
  emqx2:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx02
    - EMQX_HOST=10.10.239.116
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx01@10.10.239.31, emqx02@10.10.239.116,emqx03@10.10.239.84
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    network_mode: "host"
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
  • 启动
[root@liubei-02 emqx01]# docker-compose up -d
  • 查看结果
[root@liubei-02 emqx02]#  docker-compose ps
     Name                   Command                  State       Ports
----------------------------------------------------------------------
emqx02_emqx2_1   /usr/bin/docker-entrypoint ...   Up (healthy)

2.3 emqx03

网络需要使用host模式

  • docker-compose.yml 文件
version: '3'
services:
  emqx3:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx03
    - EMQX_HOST=10.10.239.84
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx01@10.10.239.31, emqx02@10.10.239.116,emqx03@10.10.239.84
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    network_mode: "host"
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
  • 启动
[root@liubei-03 emqx0d]# docker-compose up -d
  • 查看结果
[root@liubei-03 emqx03]#  docker-compose ps
     Name                   Command                  State       Ports
----------------------------------------------------------------------
emqx02_emqx3_1   /usr/bin/docker-entrypoint ...   Up (healthy)

2.4 WEB查看结果

  • emqx1
    url：http://10.10.239.31:18083
    在这里插入图片描述
  • emqx2
    url：http://10.10.239.116:18083
    在这里插入图片描述
    -emqx3

url：http://10.10.239.84:18083
在这里插入图片描述

3. nginx做TCP的负载均衡

nginx是可以负载TCP的，当然你也可以用HAProxy

nginx做TCP连接的负载均衡，nginx.conf 内容如下：

user  nginx;
worker_processes  auto;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;

events {
    worker_connections  1024;
}

stream {
  upstream emqx_tcp {
	    server 10.10.239.39:1883 weight=1 max_fails=3 fail_timeout=30s;
	    server 10.10.239.116:1883 weight=1 max_fails=3 fail_timeout=30s;
		server 10.10.239.84:1883 weight=1 max_fails=3 fail_timeout=30s;
 }
  server {
    listen 1883;
    proxy_pass emqx_tcp;
    proxy_buffer_size 8k;
	tcp_nodelay on;
  }
}
……

【附录】一个用于测试的伪集群

yml 文件

version: '3'
services:
  emqx1:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx
    - EMQX_HOST=node1.emqx.io
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx@node1.emqx.io, emqx@node2.emqx.io,emqx@node3.emqx.io
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
    ports:
      - 1883:1883
      - 8083:8083
      - 18083:18083
    networks:
      emqx-bridge:
        aliases:
        - node1.emqx.io

  emqx2:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx
    - EMQX_HOST=node2.emqx.io
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx@node1.emqx.io, emqx@node2.emqx.io,emqx@node3.emqx.io
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
    ports:
      - 1884:1883
      - 8084:8083
      - 18084:18083
    networks:
      emqx-bridge:
        aliases:
        - node2.emqx.io
  emqx3:
    image: harbocto.xxx.com.cn/public/emqx:4.2.3
    environment:
    - EMQX_NAME=emqx
    - EMQX_HOST=node3.emqx.io
    - EMQX_CLUSTER__DISCOVERY=static
    - EMQX_CLUSTER__STATIC__SEEDS=emqx@node1.emqx.io, emqx@node2.emqx.io,emqx@node3.emqx.io
    - EMQX_DASHBOARD__DEFAULT_USER__LOGIN=liubei
    - EMQX_DASHBOARD__DEFAULT_USER__PASSWORD=liubei@2021
    healthcheck:
      test: ["CMD", "/opt/emqx/bin/emqx_ctl", "status"]
      interval: 5s
      timeout: 25s
      retries: 5
    ports:
      - 1885:1883
      - 8085:8083
      - 18085:18083
    networks:
      emqx-bridge:
        aliases:
        - node3.emqx.io
networks:
  emqx-bridge:
    driver: bridge

启动服务

  • 启动
[root@liubei emqx]# docker-compose up -d
  • 查看结果
[root@liubei emqx]# docker-compose ps
    Name                  Command                  State                                      Ports
-----------------------------------------------------------------------------------------------------------------------------------
emqx_emqx1_1   /usr/bin/docker-entrypoint ...   Up (healthy)   11883/tcp, 0.0.0.0:18083->18083/tcp, 0.0.0.0:1883->1883/tcp,
                                                               4369/tcp, 4370/tcp, 5369/tcp, 6369/tcp, 8081/tcp,
                                                               0.0.0.0:8083->8083/tcp, 8084/tcp, 8883/tcp
emqx_emqx2_1   /usr/bin/docker-entrypoint ...   Up (healthy)   11883/tcp, 0.0.0.0:18084->18083/tcp, 0.0.0.0:1884->1883/tcp,
                                                               4369/tcp, 4370/tcp, 5369/tcp, 6369/tcp, 8081/tcp,
                                                               0.0.0.0:8084->8083/tcp, 8084/tcp, 8883/tcp
emqx_emqx3_1   /usr/bin/docker-entrypoint ...   Up (healthy)   11883/tcp, 0.0.0.0:18085->18083/tcp, 0.0.0.0:1885->1883/tcp,
                                                               4369/tcp, 4370/tcp, 5369/tcp, 6369/tcp, 8081/tcp,
                                                               0.0.0.0:8085->8083/tcp, 8084/tcp, 8883/tcp

web访问

账号密码是我们在yml文件中写的

  • 第一个节点
    url：http://10.10.239.31:18083
    在这里插入图片描述
  • 第二个节点

第一台从页面上设置了一下样式，其实两台是一样的。

url：http://10.10.239.31:18084
在这里插入图片描述

第三个节点
url：http://10.10.239.31:18085
在这里插入图片描述

玄德公笔记
关注
  • 1
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
docker-compose redis主从哨兵 redis多节点高可用 redis集群高可用
04-12
docker-compose 形式部署 redis 1主2从3哨兵 redis 多节点高可用 redis 主从哨兵 redis 集群高可用 redis 哨兵 redis 高可用
Docker部署emqx集群
人生在勤,不索何获
03-19 1388
Docker安装emqx 单机部署 docker run -itd --name emqx -p 8883:18083 -p 8884:1883 --restart=always emqx/emqx emqx 集群部署 docker run --network host -itd --name emqtt-node01 \ -v /data/acl.conf:/opt/emqx/etc/acl.conf \ -v /data:/home/emqx \ -e
Docker-compose 部署 EMQX 服务 -- MQTT
最新发布
xgl6166的博客
06-25 479
docker-compose 部署新、旧版本 EMQX 服务，文中新版本为 5.7 与旧版本 3.2.7 的 EMQX 服务。
docker-compose安装emqx集群（最新）(host模式)
qq_41369135的博客
05-12 803
如果执行以上命令是提示ping不通，像下面那样，那就是你的hosts没配对（Node 'emqx@node1.emqx.io' not responding to pings.）正确的结果（如果三个容器都启动了，可以看见三个节点都加入了。如果只启动了一个节点，集群里running状态的也只有当前节点，另外两个节点就在stop，以下是三个都启动成功）第一次启动应该会失败，因为data目录我是直接启动时自动创建的，查看容器日志会提示/opt/emqx/data/configs的权限不够。
docker-compose部署emqx集群 配置带mysql授权认证
心印的专栏
11-05 3821
EMQX 是目前全球市场广泛应用的百万级开源 MQTT 消息服务器，全球市场(西欧、北美、印度、中国)累积超 5000 家企业用户，产品环境下部署超 1 万节点，累计下载量超过 50 万，承载 MQTT 连接超 3000 万线EMQ X 可以作为智能硬件、智能家居、物联网、车联网应用的百万级设备接入平台基础配置就不介绍了，去官方看详细的配置，本文主要介绍下通过docker-compose的方式部署docker已安装docker-compose已安装。
docker-compose启动EMQX
运维玄德公
12-18 2554
1. 准备 2. 服务启动 2.1 准备 2.2 yam文件 2.3 关于日志挂载 2.4 启动服务
docker搭建EMQX集群+nginx转发TCP
weixin_41463944的博客
11-07 936
docker搭建EMQX集群+nginx转发TCP
docker-flink:使用 Docker-Compose 在 Docker 容器中部署 Apache Flink 集群
06-17
#Apache Flink 集群部署在 Docker 上使用 Docker-Compose ##安装###安装Docker 如果您遇到与 Docker 版本不兼容的 Docker-Compose 版本问题，请尝试curl -sSL https://get.docker.com/ubuntu/ | sudo sh ###Install ...
docker-compose 容器部署 mqtt
07-30
docker-compose 容器部署 mqtt 配置文件
docker-compose一键搭建Redis集群
06-12
1.先运行 createFile.py 输入宿主机IP地址，输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可
docker dockerFile 一键部署 emqx
02-25
部署MQTT Server（EMQX） 包括emqx的dockerFile和配置文件，只需要按步骤执行两条命令就可迅速部署emqx。 步骤： 1.解压 ，配置emqx_auth_redis.conf中redis连接地址 2.进入解压目录，执行docker build . 得到镜像 3.执行 docker run --name emqx -p 1883:1883 -p 8883:8883 -p 18083:18083 -d 镜像id 服务启动成功。
docker docker-compose部署harbor
08-26
docker docker-compose部署harbor
docker-compose emqx 4.3.5
极致，细节
06-30 996
EMQ X 消息服务器简介 EMQ X(Erlang/Enterprise/Elastic MQTT Broker) 是基于 Erlang/OTP 平台开发的开源物联网 MQTT 消息服务器。 Erlang/OTP是出色的软实时 (Soft-Realtime)、低延时 (Low-Latency)、分布式 (Distributed)的语言平台。 MQTT 是轻量的 (Lightweight)、发布订阅模式 (PubSub) 的物联网消息协议。 EMQ...
docker搭建emqx
LogicLancer的博客
03-04 2142
EMQ X 是一个开源的、高度可扩展的、跨平台的MQTT代理，用于处理来自物联网、移动应用程序和分布式系统的数据。要使用Docker搭建emqx，你需要首先从Docker Hub拉取emqx的官方镜像，然后可以通过Docker CLI命令或Docker Compose来运行这个容器。如果你想要使用Docker Compose来部署emqx，你需要一个docker-compose.yml配置文件。使用 Docker Compose 搭建 emqx。emqx: 运行中的容器名称。
Docker+Emqx+Nginx集群及负载均衡的搭建
zhy810302的专栏
10-14 1480
Docker+Emqx+Nginx集群及负载均衡的搭建
emqx docker-compose配置
piyingcheng的博客
04-28 2297
emqx: image: emqx/emqx:4.3.12 container_name: emqx environment: - "EMQX_AUTH__HTTP__AUTH_REQ__URL=http://ip:8301/scada/mqtt/auth" - "EMQX_AUTH__HTTP__ACL_REQ__URL=http://ip:8301/scada/mqtt/acl" - "EMQX_ALLOW_ANONYMOUS=false" - "EMQX_.
docker-compose部署emqx集群
人生在勤,不索何获
03-19 1965
version: '3' services: emqx1: image: emqx/emqx container_name: emqx1 volumes: - ./emqx:/opt/emqx ports: - 1883:1883 - 8083:8083 - 4369:4369 - 18083:18083 environment: - EMQX_NAME=mq01 - EMQX_
Docker部署EMQX
Wielun
09-07 1928
EMQ X (Erlang/Enterprise/Elastic MQTT Broker) 是基于 Erlang/OTP 平台开发的开源物联网 MQTT 消息服务器。Erlang/OTP是出色的软实时 (Soft-Realtime)、低延时 (Low-Latency)、分布式 (Distributed)的语言平台。MQTT 是轻量的 (Lightweight)、发布订阅模式 (PubSub) 的物联网消息协议。
在一台物理机上使用docker-compose部署emqx集群
06-01
是的，你可以在一台物理机上使用docker-compose部署emqx集群。以下是基本步骤： 1. 在物理机上安装docker和docker-compose。 2. 创建一个docker-compose.yml文件，其中包括emqx节点的配置。例如： ``` version: '3' services: emqx1: image: emqx/emqx:v4.2.0 container_name: emqx1 environment: - EMQX_NAME=emqx1 - EMQX_HOST=emqx1 - EMQX_NODE__DIST_LISTEN_MAX=6385 - EMQX_LISTENER__TCP__EXTERNAL=1883 - EMQX_LISTENER__WS__EXTERNAL=8083 - EMQX_CLUSTER__DISCOVERY=static - EMQX_CLUSTER__STATIC__SEEDS=emqx2@emqx2,emqx3@emqx3 ports: - "1883:1883" - "8083:8083" volumes: - ./data/emqx1/data:/opt/emqx/data - ./data/emqx1/log:/opt/emqx/log emqx2: image: emqx/emqx:v4.2.0 container_name: emqx2 environment: - EMQX_NAME=emqx2 - EMQX_HOST=emqx2 - EMQX_NODE__DIST_LISTEN_MAX=6385 - EMQX_LISTENER__TCP__EXTERNAL=1884 - EMQX_LISTENER__WS__EXTERNAL=8084 - EMQX_CLUSTER__DISCOVERY=static - EMQX_CLUSTER__STATIC__SEEDS=emqx1@emqx1,emqx3@emqx3 ports: - "1884:1883" - "8084:8083" volumes: - ./data/emqx2/data:/opt/emqx/data - ./data/emqx2/log:/opt/emqx/log emqx3: image: emqx/emqx:v4.2.0 container_name: emqx3 environment: - EMQX_NAME=emqx3 - EMQX_HOST=emqx3 - EMQX_NODE__DIST_LISTEN_MAX=6385 - EMQX_LISTENER__TCP__EXTERNAL=1885 - EMQX_LISTENER__WS__EXTERNAL=8085 - EMQX_CLUSTER__DISCOVERY=static - EMQX_CLUSTER__STATIC__SEEDS=emqx1@emqx1,emqx2@emqx2 ports: - "1885:1883" - "8085:8083" volumes: - ./data/emqx3/data:/opt/emqx/data - ./data/emqx3/log:/opt/emqx/log ``` 3. 创建一个data目录，用于容器内部的数据存储。 4. 运行docker-compose命令以启动emqx集群： ``` docker-compose up -d ``` 5. 检查集群状态： ``` docker-compose ps ``` 如果一切正常，应该看到三个emqx节点正在运行。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

玄德公笔记

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值