Rocket 双主双从实战 超级详细

最新推荐文章于 2023-09-21 17:09:22 发布
最新推荐文章于 2023-09-21 17:09:22 发布
阅读量7.2k 收藏
点赞数 1
分类专栏： RocketMQ 文章标签： Rocket高可用 Rocket双主双从 Rocket集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_34125999/article/details/100063323
版权

1、环境准备

4台机器，2台部署NameServer，4台部署Broker，双主双从 同步复制，异步刷盘。

192.168.1.38  nameServer   Broker-a
192.168.1.39  nameServer   Broker-a-s
192.168.1.40               Broker-b
192.168.1.41               Broker-b-s

在这里插入图片描述

2、修改内存


#进入该目录
cd /usr/local/rocketmq/distribution/target/apache-rocketmq/bin
#如果NameServer Broker报内存错误 那么修改NameServer Broker的内存
vim runserver.sh
JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn256m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
vim runbroker.sh
JAVA_OPT="${JAVA_OPT} -server -Xms528m -Xmx528m -Xmn256m"

3、修改配置文件

3.1、192.168.1.38 修改broker-a配置文件

cd   /usr/local/rocketmq/distribution/target/apache-rocketmq/conf/2m-2s-sync
vim broker-a.properties

#寻找NameServer
namesrvAddr=192.168.1.38:9876;192.168.1.39:9876
#集群名称
brokerClusterName=DefaultCluster
#brokername，从节点根据brokerName找主节点
brokerName=broker-a
#brokerID，0是主节点
brokerId=0
#删除时间为每天凌晨4点
deleteWhen=04
#保存时间48小时
fileReservedTime=48

#broker关系
#ASYNC_MASTER：异步复制
#SYNC_MASTER：同步双写
brokerRole=SYNC_MASTER

#刷盘方式
#- ASYNC_FLUSH  异步刷盘
#- SYNC_FLUSH  同步刷盘
flushDiskType=ASYNC_FLUSH

#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort

3.2、192.168.1.39修改broker-a-s配置文件

cd   /usr/local/rocketmq/distribution/target/apache-rocketmq/conf/2m-2s-sync
vim broker-a-s.properties

namesrvAddr=192.168.1.38:9876;192.168.1.39:9876
brokerClusterName=DefaultCluster
#找brokerName
brokerName=broker-a
#brokerID 为1是从节点
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH

#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort

3.3、192.168.1.40 修改broker-b主节点


cd   /usr/local/rocketmq/distribution/target/apache-rocketmq/conf/2m-2s-sync
vim broker-b.properties

namesrvAddr=192.168.1.38:9876;192.168.1.39:9876
brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=0
deleteWhen=04
fileReservedTime=48
brokerRole=SYNC_MASTER
flushDiskType=ASYNC_FLUSH

#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort

3.4、192.168.1.41 修改broker-b-s 从节点


cd   /usr/local/rocketmq/distribution/target/apache-rocketmq/conf/2m-2s-sync
vim broker-b-s.properties

namesrvAddr=192.168.1.38:9876;192.168.1.39:9876
brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH

#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort

4、启动NameServer


#38,39两台机器：
cd /usr/local/rocketmq/distribution/target/apache-rocketmq/bin
nohup sh ./mqnamesrv  >/dev/null 2>&1 &

5、启动broker


#38 39 40 41
cd /usr/local/rocketmq/distribution/target/apache-rocketmq/bin
nohup sh  ./mqbroker  -c  ../conf/2m-2s-sync/broker-a.properties  >/dev/null  2>&1  &
nohup sh  ./mqbroker  -c  ../conf/2m-2s-sync/broker-a-s.properties  >/dev/null  2>&1  &
nohup sh  ./mqbroker  -c  ../conf/2m-2s-sync/broker-b.properties  >/dev/null  2>&1  &
nohup sh  ./mqbroker  -c  ../conf/2m-2s-sync/broker-b-s.properties  >/dev/null  2>&1  &

6、控制台


cd /usr/local/rocketmq-console/src/main/resources
vim application.properties

rocketmq.config.namesrvAddr=192.168.1.38:9876;192.168.1.39:9876

在这里插入图片描述

7、启动


nohup java -jar  rocketmq-console-ng-1.0.1.jar    1>/dev/null    2>&1    &

在这里插入图片描述

8、测试程序

8.1、pom


<dependencies>
    <dependency>
        <groupId>org.apache.rocketmq</groupId>
        <artifactId>rocketmq-client</artifactId>
        <version>4.4.0</version>
    </dependency>
    <dependency>
        <groupId>org.projectlombok</groupId>
        <artifactId>lombok</artifactId>
        <version>1.18.6</version>
    </dependency>
    <dependency>
        <groupId>org.apache.commons</groupId>
        <artifactId>commons-lang3</artifactId>
        <version>3.8.1</version>
    </dependency>
</dependencies>

8.2、Consts


public class RocketMQConsts {
    //=========================Hello RocketMQ==========================
    public static final String HELLO_TOPIC = "helloTopic";
    public static final String HELLO_GROUP_PROVIDER = "helloGroupProvider";
    public static final String HELLO_TAG = "helloTag";
    public static final String HELLO_KEY = "helloKey";
    public static final String HELLO_NAMESERVER = "192.168.1.38:9876;192.168.1.39:9876";
    public static final String HELLO_GROUP_CUSTOMER = "helloGroupCustomer";
}

8.3、Producer


public class RocketMQProducer {

    public static void main(String[] args) throws Exception {
        //创建producer，设置NameServer地址， 关闭rocketmq 虚拟IP
        DefaultMQProducer producer = new DefaultMQProducer(RocketMQConsts.HELLO_GROUP_PROVIDER);
        producer.setNamesrvAddr(RocketMQConsts.HELLO_NAMESERVER);
        producer.start();
        for (int i = 1; i <= 10; i++) {
            Message msg = new Message(RocketMQConsts.HELLO_TOPIC, RocketMQConsts.HELLO_TAG, RocketMQConsts.HELLO_KEY, "HELLO MSG".getBytes());
            SendResult send = producer.send(msg);
            System.out.println(send);
        }
        producer.shutdown();
    }

}

8.4、Custsomer


public class RocketMQCustomer {
    public static void main(String[] args) {
        DefaultMQPushConsumer consumer = new DefaultMQPushConsumer();
        //配置组名 IP
        consumer.setNamesrvAddr(RocketMQConsts.HELLO_NAMESERVER);
        consumer.setConsumerGroup(RocketMQConsts.HELLO_GROUP_CUSTOMER);
        //最后偏移量读取消息
        consumer.setConsumeFromWhere(ConsumeFromWhere.CONSUME_FROM_LAST_OFFSET);
        try {
            //订阅主题，监听主题下哪些标签
            consumer.subscribe(RocketMQConsts.HELLO_TOPIC, "*");
            consumer.registerMessageListener(new MessageListenerOrderly() {
                @Override
                public ConsumeOrderlyStatus consumeMessage(List<MessageExt> msgs, ConsumeOrderlyContext context) {
                    Message msg = msgs.get(0);
                    try {
                        System.out.println(Thread.currentThread().getName() + "receive msg: " + new String(msg.getBody(), "utf-8"));
                        return ConsumeOrderlyStatus.SUCCESS;
                    } catch (Exception e) {
                        e.printStackTrace();
                        //等会在消费
                        return ConsumeOrderlyStatus.SUSPEND_CURRENT_QUEUE_A_MOMENT;
                    }
                }
            });
            //开始
            consumer.start();
        } catch (MQClientException e) {
            e.printStackTrace();
        }
    }
}

8.5、运行消费者 运行生产者
在这里插入图片描述
在这里插入图片描述

响彻天堂丶
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
rocket:Rocket 通过 jQuery 从两个项目创建动画
05-30
:rocket: 火箭 当项目移动到另一个元素时，Rocket会创建动画。 看一看： 包含 CSS 样式：rocket.css 或 Rocket.min.css 并包含 JS 文件：rocket.js 或 Rocket.min.js 例子： < link rel =" stylesheet " href =" rocket.min.css " > < script src =" rocket.min.js " > </ script > ＃＃用法 在你的 javascript 文件中使用这个函数： rocketcss(rocket, target, theclass) 用您要移动的类项目替换rocket 。 将target替换为要用作目标的类项目。 更换theclass rocketPulse，rocketPulseHole，rocketRotate，rocketRotateHole，ro
RocketMQ双主双从搭建
最新发布
认知 行动 坚持
01-08 769
runbroker.sh,runserver.sh启动参数默认对jvm的堆内存设置比较大(不改启动不起来)，如果是虚拟机非线上环境需要改下参数，大小可以根据自己机器来决定。因为rocketmq是java开发的，所以通过jps命令查看namesrv有没有启动，当然通过日志文件也可以，namesrv正常启动之后，后续再分别启动Broker。#替换*.xml文件中的{user.home}为自己指定的目录。#设置 rocketmq 环境变量。另外一台机器也是这样配置。#设置jdk环境变量。4、修改日志配置文件。
RocketMQ集群（2主2从）搭建
qq_35059264的博客
07-29 296
勿以浮沙筑高台 基础准备：准备2台170,171机子并且安装了rocketMQ. 1.更改hosts信息 vi /etc/hosts # nameserver 192.168.95.170 rocketmq-nameserver1 192.168.95.171 rocketmq-nameserver2 # broker 192.168.95.170 rocketmq-master1 192.168.95.170 rocketmq-slave2 192.168.95.171 rocketmq-master
启动rocketmq 报错_从入门到入土（九）手摸手教你搭建RocketMQ双主双从同步集群，不信学不会！...
weixin_39897392的博客
12-06 166
本文同步Java知音社区，专注于Java接上一篇：从入门到入土（八）RocketMQ的Consumer是如何做的负载均衡的一、环境准备1、补充如果单机都不会安装的，或者管控台不会安装的请先前往如下这篇文章：https://blog.csdn.net/ctwctw/article/details/107143968再次强调，如果单机都不会的话，先抽出2min看看上面文章，因为需要改jvm配置的，默认...
RocketMQ集群搭建（双主双从）
热门推荐
...
09-15 1万+
测试机器有限， 使用2台机器搭建集群； 192.168.8.113和192.168.8.114 nameServ1 注册中心 192.168.8.113:9876 nameServ1 注册中心 192.168.8.114:9876 broker-a broker-a --master 192.168.8.113:10911 broker-...
RocketMQ (二) 双主双从同步复制集群方案
GTC_GZ的博客
11-03 214
部署环境 作为测试环境，我们使用两台虚拟机来部署双主双从环境，具体结构如下： 整个集群由两个 name server 实例和**四个 broker **实例组成 name server: 两台服务器分别启动两个name server broker A 主从: 服务器1部署 broker A 主服务 服务器2部署 broker A 从服务 broker B 主从: 服务器2部署 broker B 主服务 服务器1部署 broker B 从服务 安装 Rocketmq 首先参照《RocketMQ
k8s学习(二十九) RocketMq集群(双主双从-同步)
文若书生的专栏
05-27 1053
确认安装前已经安装好StorageClass，可参考：https://blog.csdn.net/u011943534/article/details/100887530 1、准备jdk镜像，并拷贝到服务器 docker pull java:8-alpine 2、制作rocketmq镜像 下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/rocketmq/ 将”rocketmq-all-4.8.0-bin-release.zip”拷贝至服务器，解压 修改bi
4.2 RocketMQ (二) 双主双从同步复制集群方案
蟑螂恶霸的博客
09-21 190
在两台服务器上分别查看java进程，确认两台服务器上是否各启动了三个java进程，分别运行。在一台服务器上启动两个 broker 实例，需要为不同实例设置单独的数据存储目录。，它们不用做任何集群的配置，都是作为独立服务运行，它们之间也不会进行数据复制。，在两台虚拟机上安装 Rocketmq。或在一台虚拟机上装好后进行克隆。为了方便起见，我们在两台服务器上都创建这四个实例所需要的的目录。目录下提供了四种集群方案的配置样例。服务启动后，要同时连接这两个。在两台服务器上启动两个。在两台服务器上都启动。
RocketMQ中多master多slave的环境搭建
yinbucheng的博客
08-07 1648
1. 服务器环境入下图所示，四台机器，IP位145为主节点，149是145的从节点。146是主节点，239是146的从节点 序号                IP                         用户名                              角色                                              模式 1      
RocketDock 图标集.zip
02-03
RocketDock 让用户在使用 Windows 时更加的动感，它运用着极少的内存以及CPU资源，还可以定制图标让用户的图标看起来更加的漂亮。这里提供了一些优秀的图标集合，可以让用户自己打造一个动感味十足，界面漂亮，占用...
hubot-rocketchat:Rocket.Chat Hubot适配器
04-14
Hubot-Rocketchat 适用于Rocket.Chat的Hubot适配器！ 欢迎加入频道，与我们讨论Hubot以及您可能正在处理的所有脚本。重要的突破性变化： v2.xx包含重大突破性变化。 从此版本开始： CoffeeScript BOT将不再受支持，...
WP Rocket v3.2.5 
02-23
wp-rocket是WordPress专业的本地缓存的神器，可以优化你的JS CSS文件结构减少多次请求达到优化速度的目的，还集成了图片延迟加载对最求极致加速的用户不错的选择，通过使用这个插件，能使得你的WordPress博客将显著...
rocketchat聊天服务器-其他
06-12
Rocket.Chat是使用Meteor全栈框架以JavaScript开发的Web聊天服务器。Rocket.Chat 是特性丰富的 Slack 开源替代品之一。 主要功能： 群组聊天， 直接通信， 私聊群， 桌面通知， 媒体嵌入， 链接预览， 文件上传， ...
RocketMQ二：java整合rocketmq开发模型
admin522043032的博客
10-11 1285
​2、为了避免单个消息被检查太多次而导致半队列消息累积，默认将单个消息的检查次数限制为 15 次，但是用户可以通过 Broker 配置文件的 transactionCheckMax参数来修改此限制。开源版本的RocketMQ中，对延迟消息并不支持任意时间的延迟设定(商业版本中支持)，而是只支持18个固定的延迟级别，1到18分别对应messageDelayLevel=1s 5s 10s 30s 1m 2m 3m 4m 5m 6m 7m 8m 9m 10m 20m 30m 1h 2h。你也可以很容易地扩展它。
RocketMQ 入门、安装、广控台
qq_34125999的博客
08-13 4200
1、RocketMQ相关概念 NameServer集群 NameServer的作用是注册中心，类似于Zookeeper，但又有区别于它的地方。每个NameServer节点互相之间是独立的，没有任何信息交互，也就不存在任何的选主或者主从切换之类的问题，因此NameServer与Zookeeper相比更轻量级。单个NameServer节点中存储了活跃的Broker列表（包括master和slave）...
RocketMQ SpringBoot 采坑
qq_34125999的博客
08-19 3094
1、项目结构： 2、Provider 2.1、Provider pom <!--spring boot 版本依赖--> <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artif...
rocketmq + springboot 实现分布式事务
qq_34125999的博客
05-27 1531
1 执行流程 (1) 发送方向 MQ 服务端发送消息。 (2) MQ Server 将消息持久化成功之后，向发送方 ACK 确认消息已经发送成功，此时消息为半消息。 (3) 发送方开始执行本地事务逻辑。 (4) 发送方根据本地事务执行结果向 MQ Server 提交二次确认（Commit 或是 Rollback），MQ Server 收到Commit 状态则将半消息标记为可投递，订阅方最终将收到该消息；MQ Server 收到 Rollback 状态则删除半消息，订阅方将不会接受该消息。 (5) 在断网或
docker 安装rocketMQ 单机版
qq_34125999的博客
05-27 447
1 拉取镜像 docker pull foxiswho/rocketmq:server-4.3.2 docker pull foxiswho/rocketmq:broker-4.3.2 docker pull styletang/rocketmq-console-ng:1.0.0 2 NameServer docker run -p 9876:9876 --name rmqserver \ -e "JAVA_OPT_EXT=-server -Xms128m -Xmx128m -Xmn128m" \ -e
rocket rust
03-31
As an AI language model, I am not certain what you are referring to by "rocket rust". However, if you are asking about the potential corrosion of rockets due to rusting, it is possible for certain ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

响彻天堂丶

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值