rocketmq 4.9.1集群搭建笔记

最新推荐文章于 2024-06-15 15:51:13 发布
最新推荐文章于 2024-06-15 15:51:13 发布
阅读量331 收藏 2
点赞数
分类专栏： rocketmq 文章标签： rocketmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_26634873/article/details/128196864
版权

准备三台虚拟机
在这里插入图片描述

关闭所有的防火墙

systemctl status firewalld — 查看防火墙状态
systemctl stop firewalld – 关闭防火墙
systemctl disable firewalld – 永久禁用防火墙

配置免密登录

配置免密登录：

上传文件并解压

在根目录创建 rocket 文件
在这里插入图片描述

上传文件

在这里插入图片描述

修改启动文件

NameServer服务搭建

三台服务器均需要操作：

RocketMQ默认预设的JVM内存是4G，这是RocketMQ给我们的最
佳配置。但是通常我们用虚拟机的话都是不够4G内存的，所以需要调整下JVM内存
大小。修改的方式是直接修改runserver.sh。 用vi runserver.sh编辑这个脚本，在
脚本中找到这一行调整内存大小为512M

在这里插入图片描述
然后我们用静默启动的方式启动NameServer服务：

nohup bin/mqnamesrv &

Broker服务搭建

启动Broker的脚本是runbroker.sh。Broker的默认预设内存是8G，启动前，如
果内存不够，同样需要调整下JVM内存。vi runbroker.sh，找到这一行，进行内存
调整

在这里插入图片描述

修改配置文件

我们为了便于观察，这次搭建一个2主2从异步刷盘的集群，所以我们会使用
conf/2m-2s-async下的配置文件。
在这里插入图片描述
因为是2主2从，所以只需要修改其中两台服务的配置文件

主结点配置：
在这里插入图片描述
注意修改nameserver 的地址 

#所属集群名字，名字一样的节点就在同一个集群内
brokerClusterName=rocketmq-cluster
#broker名字，名字一样的节点就是一组主从节点。
brokerName=broker-b
#brokerid,0就表示是Master，>0的都是表示 Slave
brokerId=0
#nameServer地址，分号分割
namesrvAddr=x.x.x.x:9876;x.x.x.x:9876;x.x.x.x:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/app/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/app/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/app/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/app/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/app/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/app/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

在这里插入图片描述

从结点配置：

#所属集群名字，名字一样的节点就在同一个集群内
brokerClusterName=rocketmq-cluster
#broker名字，名字一样的节点就是一组主从节点。
brokerName=broker-b
#brokerid,0就表示是Master，>0的都是表示 Slave
brokerId=1
#nameServer地址，分号分割
namesrvAddr=x.x.x.x:9876;x.x.x.x:9876;x.x.x.x:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=11011
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/app/rocketmq/storeSlave
#commitLog 存储路径
storePathCommitLog=/app/rocketmq/storeSlave/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/app/rocketmq/storeSlave/consumequeue
#消息索引存储路径
storePathIndex=/app/rocketmq/storeSlave/index
#checkpoint 文件存储路径
storeCheckpoint=/app/rocketmq/storeSlave/checkpoint
#abort 文件存储路径
abortFile=/app/rocketmq/storeSlave/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=SLAVE
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

在这里插入图片描述

启动：

在这里插入图片描述

查看启动结果

在这里插入图片描述

到这里集群就搭建完成了

运行 rocketmq-dashboard

先上传文件到服务器：
在这里插入图片描述

项目在githup上面去搜
就是一个正常的springboot 项目
因为要连接我们自己的集群，所以要修改一下配置文件如果是个jar包，则在同级目录下创建一个application.yml的配置文件
在这里插入图片描述
内容如下：
注意格式

rocketmq:
	config:
		namesrvAddrs:
			- 192.168.1.120:9876
			- 192.168.1.121:9876
			- 192.168.1.122:9876

java -jar rocketmq-dashboard-1.0.1-SNAPSHOT.jar
在这里插入图片描述

在这里插入图片描述

如果配置文件实在有问题也可以在启动时指定参数：

java -jar rocketmq-dashboard-1.0.1-SNAPSHOT.jar --rocketmq.config.namesrvAddr[0]=127.0.0.1:9876
qq_26634873
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
RocketMQ集群部署文档（2m-2s-async模式）
从前不爱吃面的大叔
11-20 6465
第一章、安装文件的准备 1、64bit OS, Linux/Unix/Mac is recommended; 2、64bit JDK 1.8+; 3、Maven 3.2.x 4、Git 第二章、集群安装 JDK每台机器都需要安装，maven和git只需要一台安装即可，编译好rocketmq之后使用scp命令拷贝到其他机器。   1、安装64位jdk配置环境变量 J
RocketMq 集群搭建 部署 (2m-2s-async)(二)
热门推荐
weixin_40533111的博客
11-26 1万+
前言 本文基于最新版rocketmq 4.3.2搭建,2个节点,A节点部署A-m和B-s,B节点部署A-s和B-m 目录 1.准备环境 2.开始搭建 正文 1.准备环境 1.linux服务器2台(centos7) 2.maven(3.5以上) 3.jdk(本文使用的1.8(有人说使用系统自带的可能导致一些问题,未测试,此处是手动装的)) 4.工具:使用的xshell+xftp 部署结构图如下: ...
rocketmq集群（一），基于centos7搭建rocketmq集群-2m-2s-async
he_xin2009的专栏
04-28 1846
rocketMq两主两从(2m-2s-async) 多主多从（）异步刷盘集群
RocketMQ 4.9.1 性能优化 源码剖析
金甲虫的博客
01-31 1393
RocketMQ 4.9.1 版本针对 Broker 做了一些性能优化，这一批 PR 都挂载 [ISSUE#2883](https://github.com/apache/rocketmq/issues/2883) 下。
RocketMQ 2m-2s-async搭建
w907645377的博客
02-18 1192
RocketMQ 2m-2s-async搭建 两主两从异步复制搭建
最新版windows rocketmq-all-4.9.1-bin-release.zip
09-01
在Windows环境下， RocketMQ的4.9.1版本提供了稳定且高效的消息队列服务，以支持高并发、低延迟以及高可用性需求。这个最新的压缩包"rocketmq-all-4.9.1-bin-release.zip"包含了在Windows平台上运行和管理RocketMQ所...
最新版 rocketmq-all-4.9.1-bin-release.zip
09-14
9. **集群部署**：在大规模部署中，RocketMQ支持集群部署，通过NameServer的动态路由，可以方便地扩展和调整集群规模。 10. **事务消息**：RocketMQ支持分布式事务，能够保证全局事务的一致性，适用于如电商订单等...
rocketmq总结.ppt
12-07
<version>4.9.1 ``` 在使用RocketMQ时，主要有三种发送消息的方式： 1. **同步发送**：发送方发送消息后会等待服务端的响应，确保消息被正确处理。适用于需要确认消息发送成功的重要场景，如通知系统。 2. **异步...
ReShade 4.9.1 中文汉化版
最新发布
07-14
ReShade 是一个可以调节游戏画质的工具 不仅可以调节游戏的画质，也可以将玩家自己设置的预设给保存出来 是一个制作ENB的工具 使用方法： 在游戏里面按Home可以打开内置界面
phpMyAdmin v4.9.1
11-05
phpMyAdmin是一个以PHP为基础，以Web-Base方式架构在网站主机上的MySQL的资料库管理工具。phpMyAdmin 可以管理整个MySQL服务器(需要超级用户)，也可以管理单个数据库。为了实现后一种，你将
linux单机部署rocketmq集群
郭靖宇的个人博客
06-15 469
云服务器单机部署rocketmq2主2从集群
Apache RocketMQ 4.9.1 高性能优化之路
u013527895的博客
10-01 732
经过社区的投票，Apache RocketMQ 秋天的第一个版本 4.9.1 如约而至，该版本中最值得关注的是高性能优化这块，针对 Broker 端的性能，特别是对小消息的生产性能进行了针...
RocketMQ初探(五)之RocketMQ4.2.6集群部署（单Master+双Master+2m+2s+async异步复制）
weixin_30387663的博客
08-10 160
　　以下部署方式结合众多博友的博客，经过自己一步一步实际搭建，如有雷同，侵权行为，请见谅。。。其中遇到不少的坑，希望能帮到更多的人，现在很少能找到一份完整版4.2.6版本的搭建教程了，如果你有幸遇见，那么我们必定前世有缘。进入正题…… 　　首先，官方推荐有三种部署方式：　　 多Master模式（2m-noslave） 一个集群无Slave，全是Master，例如2个Master或者3个Mas...
linux中查看集群节点master,RocketMQ集群生产环境master节点节点优雅下线
weixin_29041443的博客
05-14 1239
1，现状描述由于某些原因，导致rocketmq集群中某个master节点不能正常服务，需要为master节点做流量迁移动作，已确保消息不丢失配置策略为：异步刷盘主从异步复制如果直接下线该master，由于主从异步复制，可能导致部分消息来不及复制到slave造成消息丢失。所以该方案不可行。另一种方案选择：关闭该broker的写入权限，待该broker不再有写入和消费时，再下线该节点。2.关闭brok...
linux系统安装部署RocketMQ集群（同步双主双从）
qq_33719894的博客
12-02 3210
1. 环境准备 下面我们将要部署双master双slave同步复制的RocketMQ集群，这里需要准备两个虚拟机。 192.168.10.50和192.168.22 2.下载rocketmq安装包(根据自己系统源地址下载) wget http://mirror.bit.edu.cn/apache/rocketmq/4.4.0/rocketmq-all-4.9.2-bin-release.zip 3.建立数据储存区 mkdir date 以及子目录rocketmq 4.在conf下进入到 2..
Linux Centos 环境下搭建RocketMq集群（双主双从）
gonghua0502的专栏
06-15 786
worker2中配置两个文件：broker-a.properties、broker-b-s.properties。worker3中配置两个文件：broker-b.properties、broker-a-s.properties。启动顺序为：先启动3台服务器的nameserver，再启动worker2和worker3中的broker.worker1 只需要启动nameserver即可。
RocketMq： Linux环境-单机部署和主从集群部署
喜欢历史的码农
12-05 681
说明：rocketmq需要jdk环境。（1）下载jdk安装包https://www.oracle.com/technetwork/java/javase/archive-139210.html 下载jdk，这边选择的是jdk-8u144-linux-x64.tar.gz（2）下载rocketmq安装包http://rocketmq.apache.org/dowloading/releases/ 下载RocketMQ，这边选择的版本是rocketmq-all-4.7.0-bin-release.zip（1）上
第二章 RocketMQ集群简介-安装-测试
qq_41133245的博客
11-08 444
1.各角色介绍 Producer：消息的发送者；举例：发信者 Consumer：消息接收者；举例：收信者 Broker：暂存和传输消息；举例：邮局 NameServer：管理Broker；举例：各个邮局的管理机构 Topic：区分消息的种类；一个发送者可以发送消息给一个或者多个Topic；一个消息的接收者可以订阅一个或者多个Topic消息 Message Queue：相当于是Topic的分区；用于并行发送和接收消息 2.集群特点 NameServer是一个几乎无状态节点，可集群部署，节点之间无任何
【Rocket MQ简介和多节点部署】
Edward_hjh的博客
03-30 912
RocketMQ是一个开源的分布式消息中间件，最初由阿里巴巴集团开发。它的设计目标是为了在高并发、高吞吐量的场景下，实现可靠的消息传输，并且具有良好的可伸缩性和可扩展性。RocketMQ支持多种消息模式，包括同步、异步、单向和定时消息。同时，RocketMQ还具有、分布式部署等优点，可以在众多领域中广泛应用，比如电商、金融、物流等。RocketMQ目前已经成为了Apache软件基金会下的顶级开源项目之一，并得到了全球广泛的应用和认可。
linux rocketmq下载
07-27
您可以通过以下步骤在Linux上下载RocketMQ： 1. 打开终端，并切换到您想要安装RocketMQ的目录。 2. 使用以下命令下载RocketMQ压缩包： ``` wget https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.9.1/rocketmq-all-4.9.1-bin-release.zip ``` 注意：请确保将上述URL中的版本号与您想要下载的RocketMQ版本对应。 3. 解压下载的压缩包： ``` unzip rocketmq-all-4.9.1-bin-release.zip ``` 4. 进入解压后的目录： ``` cd rocketmq-all-4.9.1-bin-release ``` 5. 接下来，您可以开始配置和使用RocketMQ。 请注意，上述步骤是基于RocketMQ 4.9.1版本的下载过程。如果您想要下载其他版本，请将URL中的版本号替换为您想要下载的版本号。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值