单机多rocketmq实现

最新推荐文章于 2024-05-16 10:23:10 发布
最新推荐文章于 2024-05-16 10:23:10 发布
阅读量253 收藏
点赞数
文章标签： java git 开发工具
原文链接：https://my.oschina.net/u/1762991/blog/994274
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

官方方式部署：
准备工作：
1.准备好依赖环境
64bit os,Linux/unix/mac
64bit jdk 1.7+
maven 3.2.x+
git
保证主机名在hosts中有对应的解析


yum install -y git
yum install -y jdk*
cat > /etc/profile.d/java.sh << EOF
export JAVA_HOME=/usr/java/latest
export PATH=\${JAVA_HOME}/bin:\$PATH
EOF
tar xf apache-maven-*.tar.gz -C /usr/local/
ln -sv /usr/local/apache-maven-* /usr/local/maven
cat > /etc/profile.d/maven.sh << EOF
export M2_HOME=/usr/local/maven
export PATH=\${M2_HOME}/bin:\${PATH}
EOF
source /etc/profile.d/java.sh
source /etc/profile.d/maven.sh
是hostname值在/etc/hosts中有对应的解析

2.clone&build
git clone https://github.com/apache/incubator-rocketmq.git
cd incubator-rocketmq

拷贝两份

由于rocketmq启动时，开启了多个端口如下：

tcp        0      0 0.0.0.0:10909               0.0.0.0:*                   LISTEN      2042/java          
tcp        0      0 0.0.0.0:10911               0.0.0.0:*                   LISTEN      2042/java          
tcp        0      0 0.0.0.0:10912               0.0.0.0:*                   LISTEN      2042/java          
tcp        0      0 0.0.0.0:9876                0.0.0.0:*                   LISTEN      2011/java

可以规划一下，定义好另外一个rocketmq使用的端口
另外一个rocketmq端口为
9870             9876
10906            10909
10915            10911
10916            10912

通过遍历代码中对应的端口，修改为期望的最终端口：

修改端口冲突
[root@test1 incubator-rocketmq]# grep --color -nR "10911" ./
./filtersrv/src/main/java/org/apache/rocketmq/filtersrv/FiltersrvConfig.java:32:    private String connectWhichBroker = "127.0.0.1:10911";
./common/src/test/java/org/apache/rocketmq/common/MixAllTest.java:41:        assertThat(MixAll.brokerVIPChannel(true, "127.0.0.1:10911")).isEqualTo("127.0.0.1:10909");
./namesrv/src/test/java/org/apache/rocketmq/namesrv/routeinfo/RouteInfoManagerTest.java:47:        routeInfoManager.unregisterBroker("default-cluster", "127.0.0.1:10911", "default-broker", 1234);
./namesrv/src/test/java/org/apache/rocketmq/namesrv/routeinfo/RouteInfoManagerTest.java:76:        RegisterBrokerResult registerBrokerResult = routeInfoManager.registerBroker("default-cluster", "127.0.0.1:10911", "default-broker", 1234, "127.0.0.1:1001",
./namesrv/src/test/java/org/apache/rocketmq/namesrv/processor/ClusterTestRequestProcessorTest.java:85:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./namesrv/src/test/java/org/apache/rocketmq/namesrv/processor/DefaultRequestProcessorTest.java:272:        RegisterBrokerResult registerBrokerResult = routeInfoManager.registerBroker("default-cluster", "127.0.0.1:10911", "default-broker", 1234, "127.0.0.1:1001",
./broker/src/main/java/org/apache/rocketmq/broker/BrokerStartup.java:98:            nettyServerConfig.setListenPort(10911);
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:125:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:238:        Properties result = defaultMQAdminExt.getBrokerConfig("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:253:        KVTable brokerStats = defaultMQAdminExt.fetchBrokerRuntimeStats("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:349:        boolean clean = defaultMQAdminExt.cleanExpiredConsumerQueueByAddr("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:376:        Map<String, Map<MessageQueue, Long>> result = defaultMQAdminExt.getConsumeStatus("unit-test", "default-broker-group", "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:396:        result.setBrokerAddr("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:397:        when(mqClientInstance.getMQClientAPIImpl().fetchConsumeStatsInBroker("127.0.0.1:10911", false, 10000)).thenReturn(result);
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:398:        ConsumeStatsList consumeStatsList = defaultMQAdminExt.fetchConsumeStatsInBroker("127.0.0.1:10911", false, 10000);
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:399:        assertThat(consumeStatsList.getBrokerAddr()).isEqualTo("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/admin/DefaultMQAdminExtTest.java:404:        SubscriptionGroupWrapper subscriptionGroupWrapper = defaultMQAdminExt.getAllSubscriptionGroup("127.0.0.1:10911", 10000);
./tools/src/test/java/org/apache/rocketmq/tools/monitor/MonitorServiceTest.java:121:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/monitor/MonitorServiceTest.java:147:        connection.setClientAddr("127.0.0.1:109111");
./tools/src/test/java/org/apache/rocketmq/tools/command/CommandUtilTest.java:71:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/CommandUtilTest.java:95:        assertThat(result.get(null).get(0)).isEqualTo("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/AllocateMQSubCommandTest.java:32:        String[] subargs = new String[] {"-t unit-test", "-i 127.0.0.1:10911"};
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/AllocateMQSubCommandTest.java:36:        assertThat(commandLine.getOptionValue("i").trim()).isEqualTo("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/UpdateTopicPermSubCommandTest.java:32:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster", "-t unit-test", "-p 6"};
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/UpdateTopicPermSubCommandTest.java:35:        assertThat(commandLine.getOptionValue('b').trim()).isEqualTo("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/UpdateTopicSubCommandTest.java:33:            "-b 127.0.0.1:10911",
./tools/src/test/java/org/apache/rocketmq/tools/command/topic/UpdateTopicSubCommandTest.java:44:        assertThat(commandLine.getOptionValue('b').trim()).isEqualTo("127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/BrokerStatusSubCommandTest.java:82:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/GetBrokerConfigCommandTest.java:84:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/CleanUnusedTopicCommandTest.java:78:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/UpdateBrokerConfigSubCommandTest.java:74:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster", "-k topicname", "-v unit_test"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/SendMsgStatusCommandTest.java:73:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-s 1024 -c 10"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/BrokerConsumeStatsSubCommadTest.java:72:        consumeStatsList.setBrokerAddr("127.0l.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/BrokerConsumeStatsSubCommadTest.java:86:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-t 3000", "-l 5", "-o true"};
./tools/src/test/java/org/apache/rocketmq/tools/command/broker/CleanExpiredCQSubCommandTest.java:78:        String[] subargs = new String[] {"-b 127.0.0.1:10911", "-c default-cluster"};
./tools/src/test/java/org/apache/rocketmq/tools/command/consumer/ConsumerProgressSubCommandTest.java:76:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/consumer/ConsumerStatusSubCommandTest.java:88:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./tools/src/test/java/org/apache/rocketmq/tools/command/offset/ResetOffsetByTimeCommandTest.java:76:        brokerAddrs.put(1234l, "127.0.0.1:10911");
./client/src/test/java/org/apache/rocketmq/client/consumer/DefaultMQPushConsumerTest.java:144:        doReturn(new FindBrokerResult("127.0.0.1:10911", false)).when(mQClientFactory).findBrokerAddressInSubscribe(anyString(), anyLong(), anyBoolean());
./client/src/test/java/org/apache/rocketmq/client/consumer/DefaultMQPullConsumerTest.java:78:        when(mQClientFactory.findBrokerAddressInSubscribe(anyString(), anyLong(), anyBoolean())).thenReturn(new FindBrokerResult("127.0.0.1:10911", false));
./client/src/test/java/org/apache/rocketmq/client/producer/DefaultMQProducerTest.java:202:        brokerAddrs.put(0L, "127.0.0.1:10911");
./client/src/test/java/org/apache/rocketmq/client/impl/factory/MQClientInstanceTest.java:56:        brokerAddrs.put(0L, "127.0.0.1:10911");
./bin/README.md:26:    sh mqadmin updateTopic -b 127.0.0.1:10911 -t TopicA
./bin/README.md:29:    sh mqadmin updateSubGroup -b 127.0.0.1:10911 -g SubGroupA

开启的每个端口都要修改，这里只列举其中一个

 

mvn -Prelease-all -DskipTests clean install –U  #多个实例多要执行

3.调整jvm参数，注意内存可能需要调整根据自己的机器来自行修改
vim bin/runserver.sh
JAVA_OPT="${JAVA_OPT} -server -Xms4g -Xmx4g -Xmn2g -XX:PermSize=128m -XX:MaxPermSize=320m"
vim bin/runbroker.sh
JAVA_OPT="${JAVA_OPT} -server -Xms8g -Xmx8g -Xmn4g"


4.设置环境变量   注意路径需要改了
cat > /etc/profile.d/rocketmq.sh << EOF
export ROCKETMQ_HOME=/opt/incubator-rocketmq/target/apache-rocketmq-broker/apache-rocketmq
export PATH=\${ROCKETMQ_HOME}/bin:\${PATH}
EOF
source /etc/profile.d/rocketmq.sh
echo "export NAMESRV_ADDR='IP:PROT;....'" >> /etc/profile
source /etc/profile

5.启动服务
chmod +x bin/{mqadmin,mqnamesrv,mqshutdown,mqbroker,tools.sh}
nohup mqnamesrv &
nohup mqbroker -c conf/2m-noslava/broker-a.properties > /dev/null 2>&1 &

6.发送和接收消息测试
tools.sh org.apache.rocketmq.example.quickstart.Producer
tools.sh org.apache.rocketmq.example.quickstart.Consumer

7.停止服务
mqshutdown broker
mqshutdown namesrv

 

另外一个实例同样也可以做一致的操作

转载于:https://my.oschina.net/u/1762991/blog/994274

weixin_33964094
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
如何在一台机器上配置多个rocketmq
chuishalu6258的博客
04-08 2575
使用rocketmq账户 1. copy2份rocketmq解压目录 拷贝命令：cp-Ralibaba-rocketmq-3.2.6alibaba-rocketmq-3.2.6_2 创建软链接：ln-salibaba-rocketmq-3.2.6_2rocketmq2 ...
RocketMq： Windows环境-单机部署和多种主从集群场景部署
喜欢历史的码农
12-06 703
windows环境下搭建 activemq 的单机部署、双主双从集群、双主集群部署
tomcat单机多实例的实现
09-29
主要介绍了tomcat单机多实例的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
【RocketMQ专题】单点部署、集群部署、Dledger高可用部署
Kearey的知识仓库
06-13 1062
本专题整理了RocketMQ单机部署、集群部署、Dledger高可用集群部署的详细步骤。配合系统参数调优的讲解，能够帮助大家从多个维度去理解RocketMQ的工作原理。
linux单机部署rocketmq集群
郭靖宇的个人博客
06-15 431
云服务器单机部署rocketmq2主2从集群
RocketMQ〖一〗介绍及在服务器上分布式搭建多Master多Slave模式RocketMQ
热门推荐
kingtok的博客
02-08 1万+
RocketMQ〖一〗
Rocketmq实例以及详解
qq_33719894的博客
12-10 6223
一.为什么用Mq 服务之间通信的中间件。 可以让应用之间解耦，相互之间依赖减小，形成异步调用。还可以用来流量削峰。数据分发。 但是会有消息一致性问题，系统复杂性增加，如果Mq宕机，系统可用性会降低。 二.特点 灵活可扩展，支持海量消息单机10万级别，使用文件做持久化, 并支持分布式事务(虽然可能造成较多的写脏), 异步刷盘,内存预分配, 高可用采用了同步双写及异步复制的方式 三.介绍 RocketMQ 是阿里巴巴在2012年开源的分布式消息中间件，目前已经捐赠给 Apac...
多个rocketmq 单机共存
JulyLykan的博客
05-28 608
1、创建备份文件 cd /usr/local/ cp -rf /usr/local/rocketmq /usr/local/rocketmq2 2、生成当前配置文件 /usr/local/rocketmq2/bin/mqbroker -p >/usr/local/rocketmq2/conf/broker.properties /usr/local/rocketmq2/bin/mqnamesrv -p >/usr/local/rocketmq2/conf/namesrv.properties
RocketMQ部署(双主双从)
tzizi19881227的博客
10-11 881
架构模型 192.168.25.135 nameserver、brokerserver master1、slave2 192.168.25.138 nameserver、brokerserver slave1、master2 主机名称分别是：rocketmq-nameserver1、rocketmq-nameserver2、rocketmq-master1、rocketmq-slave2、ro...
RocketMQ多Master多Slave模式部署
weixin_34342992的博客
09-12 281
每个 Master 配置一个 Slave，有多对Master-Slave，HA采用同步双写方式，主备都写成功，向应用返回成功。 优点：数据与服务都无单点，Master宕机情况下，消息无延迟，服务可用性与数据可用性都非常高。缺点：性能比异步复制模式略低，大约低10%左右，发送单个消息的RT会略高。目前主宕机后，备机不能自动切换为主机，后续会支持自动切换功能。 ### 先启动 NameServer...
单机数据库的实现
01-27
所有数据库都保存在服务器状态redis.h/redisServer结构的db数组（每个项都是redisDb结构，每个redisDb结构都代表一个数据库）中，在初始化服务器时，程序会根据服务器状态的dbnum属性来决定应该创建多少个数据库。...
RocketMQ单机环境搭建
04-27
RocketMQ单机环境搭建，RocketMQ单机环境搭建，RocketMQ单机环境搭建.
k8s部署RocketMQ主从
08-02
个人使用的资源包,包含dockerfile文件,以及各个组件所使用的yaml
RocketMQ-手把手教你搭建集群
秃了也弱了
01-14 2713
目录 一、集群架构 二、准备rocketmqOS1主机 三、修改rocketmqOS1配置文件 配置文件位置 修改broker-a.properties 修改broker-b-s.properties 其它配置 四、准备rocketmqOS2主机 五、修改rocketmqOS2配置文件 修改broker-b.properties 修改broker-a-s.properties 六、启动服务器 启动NameServer集群 启动两个Master 启动两个Slave 七、mqad
RocketMQ集群部署
wangqingjia的博客
06-22 9453
RocketMQ是一款非常优秀的消息中间件，运用的场景也是非常丰富，且在各大公司运用中也非常广泛。但是它是如何进行部署的呢，以及它的高可用是如何实现的呢。那么就由我来为大家讲解一哈RocketMQ是如何进行部署的，后续会讲解底层架构设计。linux环境、JDK、RocketMQ环境包1.jdk 官方下载地址 Java Archive | Oracle2.RocketMQ 官方下载地址 Downloading the Apache RocketMQ Releases - Apache RocketMQ 3.这
【RocketMQ】详解如何搭建一个多主多从的RocketMQ集群
浩瀚宇宙的一粒尘埃
09-03 3515
下载二进制包 下载链接：RocketMQ官网 注：二进制包是编译好的，拿来可以直接用，如果不需要定制化，改动源码，可选择二进制包 机器准备 准备三台机器，每台机器需要安装好jdk，1.8以上版本； 集群使用交叉部署：三台机器，每台各自装一个nameserver，三个broker：一个master，两个其他master的slave； 目录结构： 机器1：namesever-1、master-a、b-slave1、c-slave1 机器2：namesever-2、master-b、a-slave1、c-sl
RocketMQ单机环境部署
qq_43456605的博客
05-16 2229
（熟悉springboot项目的知道application配置文件在哪里，上面的端口自己要查看，我这里nameserver端口自己设置成了70216）由于我们的RocketMQ版本是最新的5.1，而DashBoard是4.9，所以编译的时候会遇到异常，所以。图1（左上）：按broker实例为类目（比如说集群中有3个broker实例）展示当前的消息数为1000条。由于RocketMQ默认的启动内存是4G，而我们的虚拟机的实际内存可能没这么大，所以需要修改启动参数。编译源码，跳过测试阶段（不跳过可能会报错）
RocketMq单机搭建集群服务
08-30 1868
1.官网下载服务包http://www-us.apache.org/dist/rocketmq/，上传到服务器,解压 2.以2m-2s-async（2主2备）为列,根据里面单机broker实例创建存储目录、日志目录 a.分别创建存储目录： 创建命令：目录下 执行： mkdir -p store/broker-a /opt/rocketmq/rocketmq-all-4.4.0...
jar包增量更新分析
最新发布
junlaiyan的专栏
05-16 246
借助jdeps分析出jar包的增量文件
单机部署rocketmq
06-02
单机部署RocketMQ的步骤如下： 1. 下载RocketMQ安装包，并解压到指定目录。 2. 配置环境变量，将RocketMQ的bin目录添加到系统的PATH中。 3. 修改配置文件，主要包括broker配置文件和namesrv配置文件，根据需求...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值