Docker部署rocketmq双主双从

最新推荐文章于 2023-07-04 12:08:25 发布
最新推荐文章于 2023-07-04 12:08:25 发布
阅读量456 收藏
点赞数 2
文章标签： linux 服务器 运维 docker Powered by 金山文档
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_53764756/article/details/128609709
版权

    • 上传软件包

    • 利用docker导入镜像

    • 检查镜像

    • 创建目录

    • 添加配置文件

#所属集群名字

brokerClusterName=rocketmq-data100

#broker名字，注意此处不同的配置文件填写的不一样

brokerName=broker-a

#0 表示 Master，>0 表示 Slave

brokerId=0

brokerIP1=192.168.100.100

#nameServer地址，分号分割

namesrvAddr=192.168.100.100:9876;192.168.100.100:9877

#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数

defaultTopicQueueNums=4

#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭

autoCreateTopicEnable=true

#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭

autoCreateSubscriptionGroup=true

#Broker 对外服务的监听端口

listenPort=10911

#删除文件时间点，默认凌晨 4点

deleteWhen=04

#文件保留时间，默认 48 小时

fileReservedTime=120

#commitLog每个文件的大小默认1G

mapedFileSizeCommitLog=1073741824

#ConsumeQueue每个文件默认存30W条，根据业务情况调整

mapedFileSizeConsumeQueue=300000

#destroyMapedFileIntervalForcibly=120000

#redeleteHangedFileInterval=120000

#检测物理文件磁盘空间

diskMaxUsedSpaceRatio=88

#存储路径

storePathRootDir=/data/rocketmq/store

#commitLog 存储路径

storePathCommitLog=/data/rocketmq/store/commitlog

#消费队列存储路径存储路径

storePathConsumeQueue=/data/rocketmq/store/consumequeue

#消息索引存储路径

storePathIndex=/data/rocketmq/store/index

#checkpoint 文件存储路径

storeCheckpoint=/data/rocketmq/store/checkpoint

#abort 文件存储路径

abortFile=/data/rocketmq/store/abort

#限制的消息大小

maxMessageSize=65536

#flushCommitLogLeastPages=4

#flushConsumeQueueLeastPages=2

#flushCommitLogThoroughInterval=10000

#flushConsumeQueueThoroughInterval=60000

#Broker 的角色

#- ASYNC_MASTER 异步复制Master

#- SYNC_MASTER 同步双写Master

#- SLAVE

brokerRole=SYNC_MASTER

#刷盘方式

#- ASYNC_FLUSH 异步刷盘

#- SYNC_FLUSH 同步刷盘

flushDiskType=SYNC_FLUSH

#checkTransactionMessageEnable=false

#发消息线程池数量

#sendMessageThreadPoolNums=128

#拉消息线程池数量

#pullMessageThreadPoolNums=128

#所属集群名字

brokerClusterName=rocketmq-data100

#broker名字，注意此处不同的配置文件填写的不一样

brokerName=broker-a

#0 表示 Master，>0 表示 Slave

brokerId=1

brokerIP1=192.168.100.101

#nameServer地址，分号分割

namesrvAddr=192.168.100.100:9876;192.168.100.100:9877

#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数

defaultTopicQueueNums=4

#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭

autoCreateTopicEnable=true

#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭

autoCreateSubscriptionGroup=true

#Broker 对外服务的监听端口

listenPort=11011

#删除文件时间点，默认凌晨 4点

deleteWhen=04

#文件保留时间，默认 48 小时

fileReservedTime=120

#commitLog每个文件的大小默认1G

mapedFileSizeCommitLog=1073741824

#ConsumeQueue每个文件默认存30W条，根据业务情况调整

mapedFileSizeConsumeQueue=300000

#destroyMapedFileIntervalForcibly=120000

#redeleteHangedFileInterval=120000

#检测物理文件磁盘空间

diskMaxUsedSpaceRatio=88

#存储路径

storePathRootDir=/data/rocketmq/s_store

#commitLog 存储路径

storePathCommitLog=/data/rocketmq/s_store/commitlog

#消费队列存储路径存储路径

storePathConsumeQueue=/data/rocketmq/s_store/consumequeue

#消息索引存储路径

storePathIndex=/data/rocketmq/s_store/index

#checkpoint 文件存储路径

storeCheckpoint=/data/rocketmq/s_store/checkpoint

#abort 文件存储路径

abortFile=/data/rocketmq/s_store/abort

#限制的消息大小

maxMessageSize=65536

#flushCommitLogLeastPages=4

#flushConsumeQueueLeastPages=2

#flushCommitLogThoroughInterval=10000

#flushConsumeQueueThoroughInterval=60000

#Broker 的角色

#- ASYNC_MASTER 异步复制Master

#- SYNC_MASTER 同步双写Master

#- SLAVE

brokerRole=SLAVE

#刷盘方式

#- ASYNC_FLUSH 异步刷盘

#- SYNC_FLUSH 同步刷盘

flushDiskType=ASYNC_FLUSH

#checkTransactionMessageEnable=false

#发消息线程池数量

#sendMessageThreadPoolNums=128

#拉消息线程池数量

#pullMessageThreadPoolNums=128

#所属集群名字

brokerClusterName=rocketmq-data100

#broker名字，注意此处不同的配置文件填写的不一样

brokerName=broker-b

#0 表示 Master，>0 表示 Slave

brokerId=0

brokerIP1=192.168.100.102

#nameServer地址，分号分割

namesrvAddr=192.168.100.100:9876;192.168.100.100:9877

#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数

defaultTopicQueueNums=4

#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭

autoCreateTopicEnable=true

#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭

autoCreateSubscriptionGroup=true

#Broker 对外服务的监听端口

listenPort=10911

#删除文件时间点，默认凌晨 4点

deleteWhen=04

#文件保留时间，默认 48 小时

fileReservedTime=120

#commitLog每个文件的大小默认1G

mapedFileSizeCommitLog=1073741824

#ConsumeQueue每个文件默认存30W条，根据业务情况调整

mapedFileSizeConsumeQueue=300000

#destroyMapedFileIntervalForcibly=120000

#redeleteHangedFileInterval=120000

#检测物理文件磁盘空间

diskMaxUsedSpaceRatio=88

#存储路径

storePathRootDir=/data/rocketmq/store

#commitLog 存储路径

storePathCommitLog=/data/rocketmq/store/commitlog

#消费队列存储路径存储路径

storePathConsumeQueue=/data/rocketmq/store/consumequeue

#消息索引存储路径

storePathIndex=/data/rocketmq/store/index

#checkpoint 文件存储路径

storeCheckpoint=/data/rocketmq/store/checkpoint

#abort 文件存储路径

abortFile=/data/rocketmq/store/abort

#限制的消息大小

maxMessageSize=65536

#flushCommitLogLeastPages=4

#flushConsumeQueueLeastPages=2

#flushCommitLogThoroughInterval=10000

#flushConsumeQueueThoroughInterval=60000

#Broker 的角色

#- ASYNC_MASTER 异步复制Master

#- SYNC_MASTER 同步双写Master

#- SLAVE

brokerRole=SYNC_MASTER

#刷盘方式

#- ASYNC_FLUSH 异步刷盘

#- SYNC_FLUSH 同步刷盘

flushDiskType=SYNC_FLUSH

#checkTransactionMessageEnable=false

#发消息线程池数量

#sendMessageThreadPoolNums=128

#拉消息线程池数量

#pullMessageThreadPoolNums=128

#所属集群名字

brokerClusterName=rocketmq-data100

#broker名字，注意此处不同的配置文件填写的不一样

brokerName=broker-b

#0 表示 Master，>0 表示 Slave

brokerId=1

brokerIP1=192.168.100.103

#nameServer地址，分号分割

namesrvAddr=192.168.100.100:9876;192.168.100.100:9876

#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数

defaultTopicQueueNums=4

#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭

autoCreateTopicEnable=true

#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭

autoCreateSubscriptionGroup=true

#Broker 对外服务的监听端口

listenPort=11011

#删除文件时间点，默认凌晨 4点

deleteWhen=04

#文件保留时间，默认 48 小时

fileReservedTime=120

#commitLog每个文件的大小默认1G

mapedFileSizeCommitLog=1073741824

#ConsumeQueue每个文件默认存30W条，根据业务情况调整

mapedFileSizeConsumeQueue=300000

#destroyMapedFileIntervalForcibly=120000

#redeleteHangedFileInterval=120000

#检测物理文件磁盘空间

diskMaxUsedSpaceRatio=88

#存储路径

storePathRootDir=/data/rocketmq/s_store

#commitLog 存储路径

storePathCommitLog=/data/rocketmq/s_store/commitlog

#消费队列存储路径存储路径

storePathConsumeQueue=/data/rocketmq/s_store/consumequeue

#消息索引存储路径

storePathIndex=/data/rocketmq/s_store/index

#checkpoint 文件存储路径

storeCheckpoint=/data/rocketmq/s_store/checkpoint

#abort 文件存储路径

abortFile=/data/rocketmq/s_store/abort

#限制的消息大小

maxMessageSize=65536

#flushCommitLogLeastPages=4

#flushConsumeQueueLeastPages=2

#flushCommitLogThoroughInterval=10000

#flushConsumeQueueThoroughInterval=60000

#Broker 的角色

#- ASYNC_MASTER 异步复制Master

#- SYNC_MASTER 同步双写Master

#- SLAVE

brokerRole=SLAVE

#刷盘方式

#- ASYNC_FLUSH 异步刷盘

#- SYNC_FLUSH 同步刷盘

flushDiskType=ASYNC_FLUSH

#checkTransactionMessageEnable=false

#发消息线程池数量

#sendMessageThreadPoolNums=128

#拉消息线程池数量

#pullMessageThreadPoolNums=128

    • 启动namesrv

docker run -d -p 9876:9876 -v /home/docker/rocketmq/namesrv-a/logs/:/root/logs -v /home/docker/rocketmq/namesrv-a/store/:/root/store --name namesrv-a -e "MAX_POSSIBLE_HEAP=100000000" rocketmqinc/rocketmq sh mqnamesrv

docker run -d -p 9877:9876 -v /home/docker/rocketmq/namesrv-b/logs/:/root/logs -v /home/docker/rocketmq/namesrv-b/store/:/root/store --name namesrv-b -e "MAX_POSSIBLE_HEAP=100000000" rocketmqinc/rocketmq sh mqnamesrv

    • 检查namesrv

    • docker启动broker主

docker run -d -p 10911:10911 -p 10909:10909 -v /home/docker/rocketmq/broker-a/logs:/root/logs -v /home/docker/rocketmq/broker-a/store/:/root/store -v /home/docker/rocketmq/broker-a/conf/broker.conf:/opt/rocketmq-4.4.0/conf/broker.conf --name broker-a --link namesrv-a:namesrv -e "NAMESRV_ADDR=192.168.100.100:9876,192.168.100.100:9877" -e "MAX_POSSIBLE_HEAP=200000000" rocketmqinc/rocketmq sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf

docker run -d -p 10911:10911 -p 10909:10909 -v /home/docker/rocketmq/broker-b/logs:/root/logs -v /home/docker/rocketmq/broker-b/store/:/root/store -v /home/docker/rocketmq/broker-b/conf/broker.conf:/opt/rocketmq-4.4.0/conf/broker.conf --name broker-b --link namesrv-a:namesrv -e "NAMESRV_ADDR=192.168.100.100:9876;192.168.100.100:9877" -e "MAX_POSSIBLE_HEAP=200000000" rocketmqinc/rocketmq sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf

    • docker启动broker从

docker run -d -p 10911:10911 -p 10909:10909 -v /home/docker/rocketmq/broker-b-s/logs:/root/logs -v /home/docker/rocketmq/broker-b-s/store/:/root/store -v /home/docker/rocketmq/broker-b-s/conf/broker.conf:/opt/rocketmq-4.4.0/conf/broker.conf --name broker-b-s --link namesrv-b:namesrv -e "NAMESRV_ADDR=192.168.100.100:9876;192.168.100.100:9877" -e "MAX_POSSIBLE_HEAP=200000000" rocketmqinc/rocketmq sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf

docker run -d -p 10911:10911 -p 10909:10909 -v /home/docker/rocketmq/broker-a-s/logs:/root/logs -v /home/docker/rocketmq/broker-a-s/store/:/root/store -v /home/docker/rocketmq/broker-a-s/conf/broker.conf:/opt/rocketmq-4.4.0/conf/broker.conf --name broker-a-s --link namesrv-a:namesrv -e "NAMESRV_ADDR=192.168.100.100:9876,192.168.100.100:9877" -e "MAX_POSSIBLE_HEAP=200000000" rocketmqinc/rocketmq sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf

    • 检查容器是否启动成功

    • 同步本地与容器时间

    • 部署console界面

docker run --name mq-console -d -e "JAVA_OPTS=-Drocketmq.namesrv.addr=192.168.100.100:9876;192.168.100.100:9877 -Dcom.rocketmq.sendMessageWithVIPChannel=false" -p 8080:8080 -t styletang/rocketmq-console-ng

浏览器访问http://ip:port

一天爱运维
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
docker-compose一键部署rocketmq
04-26
cd docker-rocketmq cd rmq chmod +x start.sh ./start.sh 不能设置权限777的同学可以设置如下 chown 3000:3000 ./rmqs/logs chown 3000:3000 ./rmqs/store chown 3000:3000 ./rmq/logs chown 3000:3000 ./rmq/store 访问浏览器 localhost:8180 注意 如果你的微服务或者项目在开发的时候没有放入docker中或者与rocketmq容器不能直接用IP访问， 那么请把broker.conf中的 #brokerIP1=192.168.0.253 前面#号去掉，并且把后面的IP地址改成你的rocketmq容器宿主机IP地址, 否则报 com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <172.0.0.120:10909> failed 配置文件 在 rmq/rmq/brokerconf 目录下
RocketMQ-docker镜像的制作与部署
张维鹏的博客
01-18 3027
本文主要介绍下 RocketMQ-docker 镜像的制作与部署，方便在不同环境快速启动RocketMQ，核心操作分为三个：NameServer 镜像的制作与部署、Broker 镜像的制作与部署、console 镜像的制作与部署。
使用docker-compose部署RocketMQ5.x 单机部署+配置参数详解
热门推荐
kerwin的博客
03-26 1万+
使用docker-compose部署RocketMQ5.x 单机部署+配置参数详解、使用docker-compose部署RocketMQ
RocketMQ Docker部署
2301_76607156的博客
04-10 3116
在JDK8之前，我们使用的Java多线程变成，主要是来完成，但是这种方式有个弊端就是没有返回值。如果想要返回值怎么办呢，大多数人就会想到 Callable + Thread的方式来获取到返回值。});复制代码从运行上面代码可以知道当调用代码的时候，当前主线程是阻塞状态，另一种方式获取到返回值就是通过轮询来判断任务是否做完获取返回值。Runnable+Thread虽然提供了多线程的能力但是没有返回值。
docker安装RocketMQ(附填坑经验connect to ＜172.17.0.3:10909＞ failed)
flyq_coffee
07-04 3323
，但是没有解决此问题，实际导致此问题的是RocketMQ配置文件，请核查RocketMQ配置文件，或者采用上方提供的配置文件。在RocketMQ集群中，可以有多个Broker实例，各个Broker通过与Namesrv交互来维护消息的元数据和路由信息，以实现高可用、负载均衡的消息传输。进入RocketMQ控制台，控制台显示的集群地址为172.17.0.3:10909，并非172.16.234.150:10909，172.17.0.3实际为docker内部分配的ID，需要此IP修改为虚拟机的IP。
docker部署rocketmq(亲测有效)
q365807701的博客
07-06 6687
docker安装，部署rocketmq
Docker部署RocketMQ
qq_29714999的博客
05-23 2464
RocketMQ作为一款纯java、分布式、队列模型的开源消息中间件，是一款低延迟、高可靠、可伸缩、易于使用的消息中间件。具有以下特性： 1、支持发布/订阅（Pub/Sub）和点对点（P2P）消息模型 2、在一个队列中可靠的先进先出（FIFO）和严格的顺序传递 3、支持拉（pull）和推（push）两种消息模式 4、单一队列百万消息的堆积能力 5、支持多种消息协议，如 JMS、MQTT 等 6、分布式高可用的部署架构,满足至少一次消息传递语义 7、提供 docker 镜像用于隔离测试和云集群部署 8、...
docker部署RocketMQ
SmallCat0912的博客
01-04 4760
docker部署RocketMQ服务
Docker 部署 RocketMQ
wolvesqun的专栏
09-08 201
Docker 部署 RocketMQ RocketMQ环境做准备 安装Linux 系统 ，配置ip为 192.168.1.100, ip对应 安装Docker环境 拉取 rocketmq 镜像版本 docker pull rocketmqinc/rocketmq:4.4.0 https://www.pangugle.com/tech/article/rocketmq/deploy.html
Rocketmq docker版部署
Fiona_AmyZhang的博客
09-15 238
Rocketmq docker版部署背景部署 背景 项目中用到了rocketmq，开始领导让弄个docker版的配置一下，启动起来就好了，用了一段时间因为内存占用以及生成的log占用/var的问题，又改成了本地部署版，然后临近上线又升级了一版，近期一直再搞rocketmq，真真是腻了，docker版的脚本又不舍得直接delete，因此在这mark一下rocketmq 双主双从集群搭建过程。 部署 拉取官方镜像 // An highlighted block docker pull rocketmqinc/r
Docker部署RocketMQ集群的Shell脚本
11-23
Docker部署RocketMQ集群的Shell脚本
RocketMQ-3.5.8双主双从配置及部署说明
10-29
RocketMQ-3.5.8，双主双从配置文件、已编译安装包、安装部署文档及开发环境测试项目
Docker中RocketMQ的安装与使用详解
01-20
搜索RocketMQ的镜像，可以通过docker的hub.docker.com上进行搜索，也可以在Linux下通过docker的search命令进行搜索，不过最近防火墙升级后，导致国外的网站打开都很慢，通过命令搜索反而会更加方便，操作Docker命令...
rocketmq双主集群搭建
08-14
双主集群是RocketMQ最简集群，会双主部署搭建了，多主或多主多从也自然没啥问题了
docker 搭建 rocketmq
红桃峰峰 的博客
09-01 1227
docker 搭建 rocketmq
docker部署rocketmq。
leadseczgw01的博客
06-24 952
1.拉取镜像文件 docker pull rocketmqinc/rocketmq:4.4.0 2.创建store、logs文件夹，启动nameserver docker run -d -p 9876:9876\ -v /home/zhanggw/rocketmq/logs:/root/logs\ -v /home/zhanggw/rocketmq/store:/root/store\ --name rmqnamesrv\ -e "MAX_POSSIBLE_HEAP=100000000"\
Docker----RocketMQ部署
梦想的边缘
07-03 638
标题RocketMQ部署 一、拉取镜像 RocketMQ镜像 # 拉取镜像 docker pull rocketmqinc/rocketmq:4.3.2 Console可视化平台镜像 # 拉取镜像 docker pull styletang/rocketmq-console-ng:1.0.0 # 修改镜像名字 docker tag 【镜像id】 rocketmq-console:1.0.0 二、挂载目录 注意：目录按照自己的实际路径来 1、创建nameserver挂载目录 mkdir -p /dock
RocketMQ(2)---Docker部署RocketMQ集群
后端元宇宙
02-20 2531
RocketMQ(2)—Docker集群部署RocketMQ =前言= 1、因为自己只买了一台阿里云服务器，所以RocketMQ集群都部署在单台服务器上只是端口不同，如果实际开发，可以分别部署在多台服务器上。 2、这里有关 Broker 和 NameServer 分别都做了了集群部署(各部署两个），且BroKer是按两主进行部署。 之所以选用Docker部署主要还是考虑 ：通过Docker部署...
docker部署rocketmq双主双从模式
binggoling
02-02 890
文章目录docker部署rocketmq双主双从模式环境准备1.镜像拉取2.配置文件3.启动容器1）启动namesrv2）启动broker4.安装rocketmq-console控制台可视化界面1）镜像2）启动容器3）访问界面 docker部署rocketmq双主双从模式 环境准备 机器两台：192.168.56.121，192.168.56.122，192.168.56.123，192.168.56.124 1.镜像拉取 docker pull foxiswho/rocketmq:4.7.0 2.配
docker 部署rocketmq
最新发布
08-21
要使用Docker部署RocketMQ，可以按照以下步骤进行操作： 1. 首先，克隆RocketMQ-Docker项目的代码。可以使用以下命令来克隆官方的Docker地址： ``` git clone https://github.com/apache/rocketmq-docker.git ``` ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

一天爱运维

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值