docker-compose搭建rocketmq集群（虚拟机）(双主双从，同步双写)

已于 2024-08-29 17:23:22 修改
阅读量411 收藏 4
点赞数 11
文章标签： docker rocketmq spring cloud
于 2024-08-29 10:46:33 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42134685/article/details/141671190
版权

1.本文以RocketMQ 5.3.0 版本的镜像为例。

2.首先先更新docker，之前旧版docker，导致rocketmq一直起不来，一直报错。

3.安装docker-compose。


服务器环境（目前只用192.168.25.135后期改ip地址即可）
| 1    | 192.168.200.133 | nameserver、brokerserver | Master1、Slave2 |
| ---- | -------------- | ------------------------ | --------------- |
| 2    | 192.168.200.134 | nameserver、brokerserver | Master2、Slave1 |


开放端口号
* `nameserver` 默认使用 9876 端口
* `master` 默认使用 10911 端口
* `slave` 默认使用11011 端口

4.在133服务器拉取镜像，不拉也行，运行的时候会自己拉

docker pull apache/rocketmq:5.3.0
docker pull styletang/rocketmq-console-ng:1.0.0

5.创建消息存储路径

192.168.200.133

mkdir -p /usr/local/rocketmq/broker-1-m/conf
touch /usr/local/rocketmq/broker-1-m/conf/broker.conf
mkdir -p /usr/local/rocketmq/broker-1-m/logs
mkdir -p /usr/local/rocketmq/broker-1-m/store

mkdir -p /usr/local/rocketmq/broker-2-s/conf
touch /usr/local/rocketmq/broker-2-s/conf/broker.conf
mkdir -p /usr/local/rocketmq/broker-2-s/logs
mkdir -p /usr/local/rocketmq/broker-2-s/store
chmod 777 -R /usr/local/rocketmq

192.168.200.134

mkdir -p /usr/local/rocketmq/broker-1-s/conf
touch /usr/local/rocketmq/broker-1-s/conf/broker.conf
mkdir -p /usr/local/rocketmq/broker-1-s/logs
mkdir -p /usr/local/rocketmq/broker-1-s/store

mkdir -p /usr/local/rocketmq/broker-2-m/conf
touch /usr/local/rocketmq/broker-2-m/conf/broker.conf
mkdir -p /usr/local/rocketmq/broker-2-m/logs
mkdir -p /usr/local/rocketmq/broker-2-m/store

6.授权

chmod 777 -R /usr/local/rocketmq

7.在133中修改/usr/local/rocketmq/broker-1-m/conf/broker.conf配置文件

vim /usr/local/rocketmq/broker-1-m/conf/broker.conf
#集群名称
brokerClusterName=rocketmq-cluster
#broker名称
brokerName=broker1
#brokerId master用0 slave用其他
brokerId=0
#清理时机
deleteWhen=4
#文件保留时长 48小时
fileReservedTime=48
#broker角色 -ASYNC_MASTER异步复制 -SYNC_MASTER同步双写 -SLAVE
brokerRole=SYNC_MASTER
#刷盘策略 - ASYNC_FLUSH 异步刷盘 - SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
## 内网的(阿里云有内网IP和外网IP)
namesrvAddr=192.168.200.133:9876;192.168.200.134:9876
#主机ip
brokerIP1=192.168.200.133
#对外服务的监听接口，同一台机器上部署多个broker,端口号要不相同
listenPort=10911
#haService中使用  默认值为：listenPort + 1
#haListenPort=10912
#主要用于slave同步master  listenPort - 2
#fastListenPort=10909
#是否能够自动创建topic,建议线下开启，线上关闭
autoCreateTopicEnable=true

8.在133中修改/usr/local/rocketmq/broker-2-s/conf/broker.conf配置文件

vim /usr/local/rocketmq/broker-2-s/conf/broker.conf
#集群名称
brokerClusterName=rocketmq-cluster
#broker名称
brokerName=broker2
#brokerId master用0 slave用其他
brokerId=1
#清理时机
deleteWhen=4
#文件保留时长 48小时
fileReservedTime=48
#broker角色 -ASYNC_MASTER异步复制 -SYNC_MASTER同步双写 -SLAVE
brokerRole=SLAVE
#刷盘策略 - ASYNC_FLUSH 异步刷盘 - SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#主机ip
brokerIP1=192.168.200.133
#对外服务的监听接口，同一台机器上部署多个broker,端口号要不相同
listenPort=11911
#haService中使用  默认值为：listenPort + 1
#haListenPort=11912
#主要用于slave同步master  listenPort - 2
#fastListenPort=11909
#是否能够自动创建topic
autoCreateTopicEnable=true
# 内网的(阿里云有内网IP和外网IP)
namesrvAddr=192.168.200.133:9876;192.168.200.134:9876

9.在134中修改/usr/local/rocketmq/broker-2-m/conf/broker.conf配置文件

vim /usr/local/rocketmq/broker-2-m/conf/broker.conf
#集群名称
brokerClusterName=rocketmq-cluster
#broker名称
brokerName=broker2
#brokerId master用0 slave用其他
brokerId=0
#清理时机
deleteWhen=4
#文件保留时长 48小时
fileReservedTime=48
#broker角色 -ASYNC_MASTER异步复制 -SYNC_MASTER同步双写 -SLAVE
brokerRole=SYNC_MASTER
#刷盘策略 - ASYNC_FLUSH 异步刷盘 - SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#主机ip
brokerIP1=192.168.200.134
#对外服务的监听接口，同一台机器上部署多个broker,端口号要不相同
listenPort=10911
#haService中使用  默认值为：listenPort + 1
#haListenPort=10912
#主要用于slave同步master  listenPort - 2
#fastListenPort=10909
#是否能够自动创建topic
autoCreateTopicEnable=true
# 内网的(阿里云有内网IP和外网IP)
namesrvAddr=192.168.200.133:9876;192.168.200.134:9876

10.在134中修改/usr/local/rocketmq/broker-1-s/conf/broker.conf配置文件

vim /usr/local/rocketmq/broker-1-s/conf/broker.conf
#集群名称
brokerClusterName=rocketmq-cluster
#broker名称
brokerName=broker1
#brokerId master用0 slave用其他
brokerId=1
#清理时机
deleteWhen=4
#文件保留时长 48小时
fileReservedTime=48
#broker角色 -ASYNC_MASTER异步复制 -SYNC_MASTER同步双写 -SLAVE
brokerRole=SLAVE
#刷盘策略 - ASYNC_FLUSH 异步刷盘 - SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#主机ip
brokerIP1=192.168.200.134
#对外服务的监听接口，同一台机器上部署多个broker,端口号要不相同
listenPort=11911
#haService中使用  默认值为：listenPort + 1
#haListenPort=11912
#主要用于slave同步master  listenPort - 2
#fastListenPort=11909
#是否能够自动创建topic
autoCreateTopicEnable=true
# 内网的(阿里云有内网IP和外网IP)
namesrvAddr=192.168.200.133:9876;192.168.200.134:9876

11.在133中新建docker-compose文件

touch /usr/local/rocketmq/docker-compose.yml
vim /usr/local/rocketmq/docker-compose.yml

12.粘贴以下内容到docker-compose.yml

version: "3"
services:
  mqnamesrv:
    image: apache/rocketmq:5.3.0
    container_name: mqnamesrv
    ports:
      - 9876:9876
    environment:
      JAVA_OPT_EXT: "-Duser.home=/opt -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqnamesrv

  mqbroker-1-m:
    image: apache/rocketmq:5.3.0
    container_name: mqbroker-1-m
    ports:
      - 10911:10911
      - 10909:10909
      - 10912:10912
    volumes:
      - /usr/local/rocketmq/broker-1-m/conf/broker.conf:/home/rocketmq/conf/broker.conf
      - /usr/local/rocketmq/broker-1-m/logs:/home/rocketmq/logs
      - /usr/local/rocketmq/broker-1-m/store:/home/rocketmq/store
    environment:
      NAMESRV_ADDR: "mqnamesrv:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqbroker -c /home/rocketmq/conf/broker.conf
    depends_on:
      - mqnamesrv
  mqbroker-2-s:
    image: apache/rocketmq:5.3.0
    container_name: mqbroker-2-s
    ports:
      - 11911:11911
      - 11909:11909
      - 11912:11912
    volumes:
      - /usr/local/rocketmq/broker-2-s/conf/broker.conf:/home/rocketmq/conf/broker.conf
      - /usr/local/rocketmq/broker-2-s/logs:/home/rocketmq/logs
      - /usr/local/rocketmq/broker-2-s/store:/home/rocketmq/store
    environment:
      NAMESRV_ADDR: "mqnamesrv:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqbroker -c /home/rocketmq/conf/broker.conf
    depends_on:
      - mqnamesrv
          
  mqconsole:
    image: styletang/rocketmq-console-ng:1.0.0
    container_name: mqconsole
    ports:
      - 19876:8080
    environment:
      JAVA_OPTS: -Drocketmq.namesrv.addr=mqnamesrv:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=falses
    depends_on:
      - mqnamesrv

13.在134中新建docker-compose文件

touch /usr/local/rocketmq/docker-compose.yml
vim /usr/local/rocketmq/docker-compose.yml

14.粘贴以下内容到docker-compose.yml

version: "3"
services:
  mqnamesrv:
    image: apache/rocketmq:5.3.0
    container_name: mqnamesrv
    ports:
      - 9876:9876
    environment:
      JAVA_OPT_EXT: "-Duser.home=/opt -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqnamesrv
          
  mqbroker-2-m:
    image: apache/rocketmq:5.3.0
    container_name: mqbroker-2-m
    ports:
      - 10911:10911
      - 10909:10909
      - 10912:10912
    volumes:
      - /usr/local/rocketmq/broker-2-m/conf/broker.conf:/home/rocketmq/conf/broker.conf
      - /usr/local/rocketmq/broker-2-m/logs:/home/rocketmq/logs
      - /usr/local/rocketmq/broker-2-m/store:/home/rocketmq/store
    environment:
      NAMESRV_ADDR: "mqnamesrv:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqbroker -c /home/rocketmq/conf/broker.conf
    depends_on:
      - mqnamesrv
  mqbroker-1-s:
    image: apache/rocketmq:5.3.0
    container_name: mqbroker-1-s
    ports:
      - 11911:11911
      - 11909:11909
      - 11912:11912
    volumes:
      - /usr/local/rocketmq/broker-1-s/conf/broker.conf:/home/rocketmq/conf/broker.conf
      - /usr/local/rocketmq/broker-1-s/logs:/home/rocketmq/logs
      - /usr/local/rocketmq/broker-1-s/store:/home/rocketmq/store
    environment:
      NAMESRV_ADDR: "mqnamesrv:9876"
      JAVA_OPTS: " -Duser.home=/opt"
      JAVA_OPT_EXT: "-server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"
    command: sh mqbroker -c /home/rocketmq/conf/broker.conf
    depends_on:
      - mqnamesrv

15.分别在docker-compose.yml文件所在目录运行docker-compose.yml

docker-compose up -d

14.查看容器是否启动成功

docker ps
docker logs -f (容器id)

.显示成功，就是成功了。

打开192.168.200.133:19876

16.注意，记得把以上ip地址换成自己的。如果是云服务器，则需要把以上的端口都打开。注意路径不要错了。

One_for_all96版
关注
docker-compose 搭建RocketMQ 5.1.0 集群（双主双从模式） | Spring Cloud 28
gmHappy
03-22 1万+
网上关于`Docker`搭建`RocketMQ`单机&集群的版本一般都是`4.X`。关于最新的`5.X`版本，官方给出的示例都是基于物理机&虚拟机实现，不便于我们我们日常开发使用，而且官方镜像 https://hub.docker.com/r/apache/rocketmq 中也没有关于容器化使用的介绍。 本章的目的：展示基于`docker-compose` 搭建`RocketMQ 5.1.0`集群，及一些部署在部署过程中的注意事项，方便大家对新版本的尝鲜与使用。
docker-compose部署rocketMQ
cjy_666666的博客
05-28 572
docker-compose部署rocketMQ
Docker-compose安装RocketMq
乌龟的专栏
09-14 1577
Docker安装RocketMQ Server + Broker + Console 1、创建docker-compose.yml 先创建文件夹 cd /usr/local/ mkdir -p docker/rocketmq vi docker-compose.yml version: '3.5' services: rmqnamesrv: image: foxiswho/rocketmq:server container_name: rmqnamesrv ports:
docker-compose单机部署rocketmq集群(双主双从，同步双写)
最新发布
weixin_42134685的博客
08-27 350
6.修改/usr/local/rocketmq/broker-1-m/conf/broker.conf配置文件。7.修改/usr/local/rocketmq/broker-2-s/conf/broker.conf配置文件。8.修改/usr/local/rocketmq/broker-2-m/conf/broker.conf配置文件。9.修改/usr/local/rocketmq/broker-1-s/conf/broker.conf配置文件。14.显示成功，就是成功了。4.创建消息存储路径。
docker 安装rocketmq
一种感觉的博客
05-12 298
前言 首先我们是使用Docker进行搭建环境的，所以我们先要在自己机器上的安装Docker，具体的安装过程以及对于Docker的介绍官方文档里面说的很清楚了https://docs.docker.com/get-started/。 我们要搭建RocketMQ服务器，那么我们就要知道大概搭建RocketMQ服务器需要部署哪些东西。对于RocketMQ有一个架构图，如下所示。而图中所示的Producer（生产者）和Consumer（消费者）无需我们搭建，因为那是作为一个服务器进行启动的。nameserver就是
Docker Compose 部署 RocketMQ
qq_51095731的博客
10-26 1261
Docker Compose 部署 RocketMQ
docke实战篇（五）--docker-compose搭建redis哨兵集群
热门推荐
LuckyToMeet-Dian叶
01-22 1万+
前言： 上一篇文章介绍了docker-compose 的使用，以及提供了tomcat和mysql的文件配置。这篇，我们来学习一下如何使用docker来搭建redis集群。可以说，docker搭建集群，真的真的很简单。想到当初用真实机器搭建集群简单很多了，而且初次使用springboot2.0以上连接集群也出了很多问题。最近学完docker后，一切都迎刃而解，感谢docker的出...
如何通过docker-compose部署ES集群
gaohuanjie的专栏
07-11 2037
Linux系统搭建ES集群的方式有很多种，其中通过docker-compose进行安装最为方便......
docker-compose安装kafka集群以及golang简单操作kafka
m0_59335012的博客
07-22 909
docker-compose安装kafka集群以及golang简单操作kafka 以及命令行操作topic记录
docker-compose搭建部署 Skywalking
qq_27735079的博客
10-11 2350
谷歌在 2010 年 4 月发表了一篇论文《Dapper, a Large-Scale Distributed Systems Tracing Infrastructure》介绍了分布式追踪的概念，之后很多互联网公司都开始根据这篇论文打造自己的分布式链路追踪系统。APM 系统的核心技术就是分布式链路追踪。
docker-compose一键部署rocketmq
04-26
cd docker-rocketmq cd rmq chmod +x start.sh ./start.sh 不能设置权限777的同学可以设置如下 chown 3000:3000 ./rmqs/logs chown 3000:3000 ./rmqs/store chown 3000:3000 ./rmq/logs chown 3000:3000 ./rmq/store 访问浏览器 localhost:8180 注意 如果你的微服务或者项目在开发的时候没有放入docker中或者与rocketmq容器不能直接用IP访问， 那么请把broker.conf中的 #brokerIP1=192.168.0.253 前面#号去掉，并且把后面的IP地址改成你的rocketmq容器宿主机IP地址, 否则报 com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <172.0.0.120:10909> failed 配置文件 在 rmq/rmq/brokerconf 目录下
DockerCompose部署rocketMQ
月月大王的博客
10-16 3870
最近工作时用到了rocketMQ，并且测试服务器的rocketMQ总会出现问题，我找到运维的同事把测试服务器的账号要过来，准备自己部署一下rocketMQ，于是便有了这篇博客。
docker-compose安装rocketmq
gxy03的博客
07-11 648
broker.conf里的内容为：brokerIP1 为 `宿主机IP`
docker compose 部署 rocketmq
chen_peng7的博客
06-13 959
docker compose 部署 rocketmq
Docker实战：docker compose 搭建Rocketmq
luckywuxn的博客
09-05 1250
浏览器访问：http://192.168.17.173:8087/#/，效果图如下，至此，docker compose 搭建Rocketmq完成。
Docker实战：docker compose搭建Rocketmq
高性价比服务器就选：蓝易云
03-30 435
例如，你可能需要调整服务的配置，或者添加更多的服务，比如RocketMQ的控制台。首先，我们需要了解Docker和Docker Compose。Docker是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的Linux机器或Windows机器上，也可以实现虚拟化。你可以通过Docker Compose的命令来管理这些服务，比如docker-compose down来停止和删除服务，或者docker-compose logs来查看服务的日志。
使用docker-compose部署RocketMQ5.0
cm777的博客
02-17 3809
使用docker-compose部署rocketmq5.0。文中会介绍docker-compose版本以及需要注意的项。
docker-compose 安装RocketMq
fasheng0102的专栏
06-08 1582
docker ps 查看是否都启动了，如果都启动了，在成功，如果有没有启动成功，则可以查看docker日志，一般都是，ip设置问题。想快速的使用RocketMq，通过docker-compose的方式来进行安装，docker的安装方式不在赘述。三、同级目录下编辑并存储docker-compose.yml 文件。一、在/usr/local/docker文件夹下新建。二、在rocketmq 文件夹下，建立data文件夹。六、保存上边配置，执行docker-compose。四、data 文件夹新建子文件夹。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值