使用docker-compose部署rocketMQ集群

最新推荐文章于 2023-12-07 20:31:03 发布
最新推荐文章于 2023-12-07 20:31:03 发布
阅读量3.3k 收藏 9
点赞数 4
分类专栏： docker 文章标签： docker 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42410658/article/details/121668061
版权

环境准备

docker安装与配置阿里镜像加速器
docker-compose安装—pip3

rocketMQ集群组成（双主双从异步刷盘）

容器名称IP与宿主机的端口映射
rmqnamesrv-armqnamesrv-a9876:9876
rmqnamesrv-brmqnamesrv-b9876:9877
rmqbroker-armqbroker-a10911:10911
rmqbroker-a-srmqbroker-a-s10911:10912
rmqbroker-brmqbroker-b10911:10913
rmqbroker-b-srmqbroker-b-s10911:10914
rmqconsolermqconsole8080:8080

容器内部通信使用自定义网络，IP别名和容器名一样

传送门：docker网络探究

准备docker-compose文件

docker-compose.yml （注意映射目录中含有rocketMQ的版本号，按需修改）

version: '3.5'
services:
  rmqnamesrv-a:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqnamesrv-a
    ports:
      - 9876:9876
    volumes:
      - ./rocketmq/logs/nameserver-a:/root/logs
      - ./rocketmq/store/nameserver-a:/root/store
    command: sh mqnamesrv
    networks:
      rmq:
        aliases:
          - rmqnamesrv-a

  rmqnamesrv-b:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqnamesrv-b
    ports:
      - 9877:9876
    volumes:
      - ./rocketmq/store/nameserver-b:/root/store
      - ./rocketmq/logs/nameserver-b:/root/logs
    command: sh mqnamesrv
    networks:
      rmq:
        aliases:
          - rmqnamesrv-b

  rmqbroker-a:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqbroker-a
    ports:
      - 10911:10911
    volumes:
      - ./rocketmq/logs/broker-a:/root/logs
      - ./rocketmq/store/broker-a:/root/store
      - ./rocketmq/broker-a.conf:/opt/rocketmq-4.4.0/conf/broker.conf
    environment:
      TZ: Asia/Shanghai
      NAMESRV_ADDR: "rmqnamesrv-a:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
    command: sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf autoCreateTopicEnable=true &
    links:
      - rmqnamesrv-a:rmqnamesrv-a
      - rmqnamesrv-b:rmqnamesrv-b
    networks:
      rmq:
        aliases:
          - rmqbroker-a

  rmqbroker-a-s:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqbroker-a-s
    ports:
      - 10912:10911
    volumes:
      - ./rocketmq/logs/broker-a-s:/root/logs
      - ./rocketmq/store/broker-a-s:/root/store
      - ./rocketmq/broker-a-s.conf:/opt/rocketmq-4.4.0/conf/broker.conf
    environment:
      TZ: Asia/Shanghai
      NAMESRV_ADDR: "rmqnamesrv-a:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
    command: sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf autoCreateTopicEnable=true &
    links:
      - rmqnamesrv-a:rmqnamesrv-a
      - rmqnamesrv-b:rmqnamesrv-b
    networks:
      rmq:
        aliases:
          - rmqbroker-a-s

  rmqbroker-b:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqbroker-b
    ports:
      - 10913:10911
    volumes:
      - ./rocketmq/logs/broker-b:/root/logs
      - ./rocketmq/store/broker-b:/root/store
      - ./rocketmq/broker-b.conf:/opt/rocketmq-4.4.0/conf/broker.conf
    environment:
      TZ: Asia/Shanghai
      NAMESRV_ADDR: "rmqnamesrv-a:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
    command: sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf autoCreateTopicEnable=true &
    links:
      - rmqnamesrv-a:rmqnamesrv-a
      - rmqnamesrv-b:rmqnamesrv-b
    networks:
      rmq:
        aliases:
          - rmqbroker-b

  rmqbroker-b-s:
    image: rocketmqinc/rocketmq:latest
    container_name: rmqbroker-b-s
    ports:
      - 10914:10911
    volumes:
      - ./rocketmq/logs/broker-b-s:/root/logs
      - ./rocketmq/store/broker-b-s:/root/store
      - ./rocketmq/broker-b-s.conf:/opt/rocketmq-4.4.0/conf/broker.conf
    environment:
      TZ: Asia/Shanghai
      NAMESRV_ADDR: "rmqnamesrv-a:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
    command: sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf autoCreateTopicEnable=true &
    links:
      - rmqnamesrv-a:rmqnamesrv-a
      - rmqnamesrv-b:rmqnamesrv-b
    networks:
      rmq:
        aliases:
          - rmqbroker-b-s

  rmqconsole:
    image: styletang/rocketmq-console-ng:latest
    container_name: rmqconsole
    ports:
      - 8080:8080
    environment:
      JAVA_OPTS: -Drocketmq.namesrv.addr=rmqnamesrv-a:9876;rmqnamesrv-b:9877 -Dcom.rocketmq.sendMessageWithVIPChannel=false
    networks:
      rmq:
        aliases:
          - rmqconsole

# 自定义网络
networks:
  rmq:
    name: rmq
    driver: bridge

准备配置文件

broker-a.conf

brokerClusterName = rocketmq-cluster
brokerName = broker-a

# 0表示broker master  非0表示 broker slaver
brokerId = 0

# brokerIP1 当前broker监听的IP
brokerIP1 = rmqbroker-a

# brokerIP2 存在broker主从时，在broker主节点上配置了brokerIP2的话,broker从节点会连接主节点配置的brokerIP2来同步
# brokerIP2 = 192.168.111.129

deleteWhen = 04
fileReservedTime = 48


namesrvAddr = rmqnamesrv-a:9876;rmqnamesrv-b:9876

# 是否能够自动创建topic
autoCreateTopicEnable = true

#Broker 对外服务的监听端口, 默认10911
# listenPort = 10911

#Broker角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole = ASYNC_MASTER

#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType = ASYNC_FLUSH

broker-a-s.conf

brokerClusterName = rocketmq-cluster
brokerName = broker-a

# 0表示broker master  非0表示 broker slaver
brokerId = 1

brokerIP1 = rmqbroker-a-s

deleteWhen = 04
fileReservedTime = 48


namesrvAddr = rmqnamesrv-a:9876;rmqnamesrv-b:9876

# autoCreateTopicEnable=true

#Broker 对外服务的监听端口,
#listenPort = 10912

#Broker角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole = SLAVE

#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType = ASYNC_FLUSH

broker-b.conf

brokerClusterName = rocketmq-cluster
brokerName = broker-b

# 0表示broker master  非0表示 broker slaver
brokerId = 0

# brokerIP1 当前broker监听的IP
brokerIP1 = rmqbroker-b

# brokerIP2 存在broker主从时，在broker主节点上配置了brokerIP2的话,broker从节点会连接主节点配置的brokerIP2来同步
# brokerIP2 = 192.168.111.129

deleteWhen = 04
fileReservedTime = 48


namesrvAddr = rmqnamesrv-a:9876;rmqnamesrv-b:9876

# 是否能够自动创建topic
autoCreateTopicEnable = true

#Broker 对外服务的监听端口, 默认10911
# listenPort = 10913

#Broker角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole = ASYNC_MASTER

#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType = ASYNC_FLUSH

broker-b-s.conf

brokerClusterName = rocketmq-cluster
brokerName = broker-b

# 0表示broker master  非0表示 broker slaver
brokerId = 1

brokerIP1 = rmqbroker-b-s

deleteWhen = 04
fileReservedTime = 48


namesrvAddr = rmqnamesrv-a:9876;rmqnamesrv-b:9876

# 是否能够自动创建topic
autoCreateTopicEnable = true

#Broker 对外服务的监听端口,
# listenPort = 10914

#Broker角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole = SLAVE

#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType = ASYNC_FLUSH

一键启动集群

将docker-compose.yml文件和配置文件上传到服务器，注意对应目录
执行命令并查看宿主机映射过来的启动日志

docker-compose up -d

访问控制台：http://宿主机IP:8080/
在这里插入图片描述

TaotaoPlus
关注
  • 4
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
docker-compose部署rocketMQ
cjy_666666的博客
05-28 518
docker-compose部署rocketMQ
docker-compose一键部署rocketmq
04-26
cd docker-rocketmq cd rmq chmod +x start.sh ./start.sh 不能设置权限777的同学可以设置如下 chown 3000:3000 ./rmqs/logs chown 3000:3000 ./rmqs/store chown 3000:3000 ./rmq/logs chown 3000:3000 ./rmq/...
docker 安装rocketmq
一种感觉的博客
05-12 275
前言 首先我们是使用Docker进行搭建环境的，所以我们先要在自己机器上的安装Docker，具体的安装过程以及对于Docker的介绍官方文档里面说的很清楚了https://docs.docker.com/get-started/。 我们要搭建RocketMQ服务器，那么我们就要知道大概搭建RocketMQ服务器需要部署哪些东西。对于RocketMQ有一个架构图，如下所示。而图中所示的Producer（生产者）和Consumer（消费者）无需我们搭建，因为那是作为一个服务器进行启动的。nameserver就是
RocketMQ（一）使用docker-compose部署RocketMQ 4.9.4集群
bacawa的博客
05-06 5067
docker-compose部署rocketMQ 4.9.4集群，并做数据持久化
docker、docker-compose部署rocketmq4.7.0
aimcode
07-21 360
docker部署rocketmq4.7.0、docker-compose部署rocketmq4.5.2
docker compose 部署 rocketmq
chen_peng7的博客
06-13 931
docker compose 部署 rocketmq
docker 部署rocketmq 5.0
qq_33892404的博客
05-29 1500
docker部署rocketmq5.0.0
在一台服务器上用docker-compose双主双从的rocketmq消息队列----rocketmq双主双从模式
m0_60747626的博客
12-07 1021
rocketmq消息队列
基于docker-compose快速部署spiderflow
05-25
包含了docker-compose快速部署spiderflow的所有相关文件，包含docker-compose.yml，mysql， spiderflow.jar 可直接运行docker-compose up -d 启动容器。 数据库相关配置都可以通过docker-compose.yml修改。
docker-flink:使用 Docker-Compose 在 Docker 容器中部署 Apache Flink 集群
06-17
#Apache Flink 集群部署在 Docker 上使用 Docker-Compose ##安装###安装Docker 如果您遇到与 Docker 版本不兼容的 Docker-Compose 版本问题，请尝试curl -sSL https://get.docker.com/ubuntu/ | sudo sh ###Install ...
docker-compose安装包
最新发布
12-19
Docker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。 Docker-Compose将所管理的容器分为三层，分别是工程（project），服务（service）以及容器（container）。Docker-Compose运行目录...
docker-compose 搭建RocketMQ 5.1.0 集群
08-02
Docker-Compose 搭建 RocketMQ 5.1.0 集群 Docker-Compose 是一个流行的容器编排工具，可以快速搭建和管理容器集群。...使用 Docker-Compose 搭建 RocketMQ 集群可以快速部署和管理容器集群，提高了开发效率和灵活性。
RocketMQ 之使用docker-compose安装指南
在IT技术的世界,天天向上↑
05-21 1923
一、确保服务器已经安装了docker,docker compose 查看docker安装情况: 二、部署RocketMq 1,先创建好几个文件夹，用来放日志和配置： cd /usr/local/zxl/rocketmq mkdir rocketmq cd rocketmq mkdir data cd data mkdir logs store brokerconf cd brokerconf vi broker.conf 2, 配置broker.conf内容如下： broke...
RocketMQ第三话 -- RocketMQ高可用集群搭建
生生不息，则源源不断
06-27 400
本文主要记录RocketMQ两主两从的集群搭建liunx centos7，docker-compose，镜像apache/rocketmq:4.9.3 master2和salve2复制上面内容，需要主要的是：brokerName、brokerId、brokerRole、listenPort这几个参数的不同 2.3 启动 2.4 java中连接测试 只有配置不一样，其他无需修改 2.5 控制台 节点都启动的情况下，消费了一些消息，是分布消费的 1.特别注意配置文件的不同和相同处 2.内存大小控制，虚拟机测试
一文理解RocketMQ
追梦格林
05-18 1163
通过本文能够比较全面的了解RocketMQ的工作原理，docker-compose搭建RocketMQ集群以及简单的Demo代码
docker搭建rocketmq集群
鶸者为何战斗
03-07 3822
借鉴于 https://www.cnblogs.com/qdhxhz/p/11096682.html 但是其中有一些错误，本人进行了修改 docker-compose.yml version: '3.5' services: rmqnamesrv-a: image: rocketmqinc/rocketmq:4.3.0 container_name: rmqnames...
使用docker部署rocketmq时的坑
热门推荐
工具人的博客
08-17 1万+
官方docker项目地址: https://github.com/apache/incubator-rocketmq-externals 里面有rocketmq的docker运行文档如果同时需要docker运行console需要注意一个问题 下面是官方文档中运行console的命令，里面的JAVA_OPTS参数是不正确的，不知道是不是版本原因docker run -e "JAVA_OPTS=
docker-compose安装rocketmq双主集群
袖卷笛音的博客
12-30 832
简介 使用docker-compose搭建rocketmq双主集群，之所以使用docker-compose是因为启动部署都比较简单，不用每次启动容器传入参数,可以统一管理等等。这里使用两台服务器（前提需要安装docker,安装docker-compose）,一台101服务器是放nameserver,一台102服务器是放broker以及控制台，因为只是开发使用，所以broker并未放在两台服务器上 部署nameserver 101服务器新建一个/docker/rocketmq-cluster-docker目
docker-compose搭建rocketmq集群模式
HH_HH_HH1的博客
09-29 536
一、准备环境 1.1、首先你要有一个docker的环境，可以使用命令 docker run docker.io/hello-world 进行验证 1.2、因为一会要用git拉取工程所以使用 yml install git 命令进行git的下载 1.3、使用 git clonehttps://github.com/apache/rocketmq-docker.git 下载相应的工程 1.4、编译rocketmq镜像 cd rocketmq-docker/image-build ..
docker-compose 部署redis集群
12-07
以下是使用docker-compose部署Redis集群的步骤： 1.创建一个目录，例如redis-cluster，并在该目录中创建一个docker-compose.yaml文件。 2.在docker-compose.yaml文件中编写以下内容： ```yaml version: '3' ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值