Ubuntu搭建rocketmq集群

最新推荐文章于 2024-06-13 10:40:31 发布
最新推荐文章于 2024-06-13 10:40:31 发布
阅读量249 收藏 9
点赞数 4
分类专栏： 搭建环境 文章标签： ubuntu rocketmq linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_62106630/article/details/136917591
版权

在各种bug与爆炸的情况下, 终于把环境搭建好了, 特此记录

配置环境变量

在 /etc/profile中进行修改

修改完立刻生效

 source /etc/profile

执行完后只是在当前窗口可见, 要修改完毕还是要重启电脑

在这里面写的环境变量可以通过
 

Echo $JAVA_HOME

Echo $ROCKETMQ_HOME

获取对应位置

 

在host中添加信息

# rocketnameserver

192.168.33.130 rocketmq-nameserver1

192.168.33.131 rocketmq-nameserver2
# rocket broker

192.168.33.130 rocketmq-master1

192.168.33.130 rocketmq-slave2

192.168.33.131 rocketmq-master2

192.168.33.131 rocketmq-slave1

然后重置网卡

systemctl restart NetworkManager

注意网上大多数的重置命令已经过时, 在ubuntu18版本后全部只支持使用systemctl restart NetworkManager命令重置网卡

然后检查并关闭防火墙

sudo ufw status

显示未活动就是没有启动

开发时也不需要启动…

添加store存储目录

就是设置commitlog的存储位置

还有其他消息存储位置

根目录下自定义路径即可

192.168.33.130的虚拟机

sudo mkdir -p /usr/local/rocketmq/store/broker-a

sudo mkdir -p /usr/local/rocketmq/store/broker-a/commitlog

sudo mkdir -p /usr/local/rocketmq/store/broker-a/consumequeue

sudo mkdir -p /usr/local/rocketmq/store/broker-a/index

sudo mkdir -p /usr/local/rocketmq/store/broker-b-s

sudo mkdir -p /usr/local/rocketmq/store/broker-b-s/commitlog

sudo mkdir -p /usr/local/rocketmq/store/broker-b-s/consumequeue

sudo mkdir -p /usr/local/rocketmq/store/broker-b-s/index

192.168.33.131的虚拟机

sudo mkdir -p /usr/local/rocketmq/store/broker-b

sudo mkdir -p /usr/local/rocketmq/store/broker-b/commitlog

sudo mkdir -p /usr/local/rocketmq/store/broker-b/consumequeue

sudo mkdir -p /usr/local/rocketmq/store/broker-b/index

sudo mkdir -p /usr/local/rocketmq/store/broker-a-s

sudo mkdir -p /usr/local/rocketmq/store/broker-a-s/commitlog

sudo mkdir -p /usr/local/rocketmq/store/broker-a-s/consumequeue

sudo mkdir -p /usr/local/rocketmq/store/broker-a-s/index

环境配置

在/usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/conf的properties文件中进行配置

192.168.33.130的虚拟机a

broker_a.properties

# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements.  See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License.  You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.

brokerClusterName=DefaultCluster
brokerName=broker-a
brokerId=0
deleteWhen=04
fileReservedTime=48
brokerRole=SYNC_MASTER
flushDiskType=ASYNC_FLUSH

#Broker 对外服务的监听端口
listenPort=10910
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#nameServer地址，分号分割
namesrvAddr=192.168.33.130:9876;192.168.33.131:9876
#存储路径
storePathRootDir=/usr/local/rocketmq/store/broker-a
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/broker-a/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/broker-a/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/broker-a/index

broker_b_s.properties

# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements.  See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License.  You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.

brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH

#Broker 对外服务的监听端口
listenPort=10921
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#nameServer地址，分号分割
namesrvAddr=192.168.33.130:9876;192.168.33.131:9876
#存储路径
storePathRootDir=/usr/local/rocketmq/store/broker-b-s
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/broker-b-s/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/broker-b-s/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/broker-b-s/index

192.168.33.131的虚拟机b

broker_b.properties

# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements.  See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License.  You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.
brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=0
deleteWhen=04
fileReservedTime=48
brokerRole=SYNC_MASTER
flushDiskType=ASYNC_FLUSH

#Broker 对外服务的监听端口
listenPort=10920
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#nameServer地址，分号分割
namesrvAddr=192.168.33.130:9876;192.168.33.131:9876
#存储路径
storePathRootDir=/usr/local/rocketmq/store/broker-b
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/broker-b/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/broker-b/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/broker-b/index

broker_a_s.properties

# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements.  See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License.  You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.
brokerClusterName=DefaultCluster
brokerName=broker-a
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH

#Broker 对外服务的监听端口
listenPort=10911
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#nameServer地址，分号分割
namesrvAddr=192.168.33.130:9876;192.168.33.131:9876
#存储路径
storePathRootDir=/usr/local/rocketmq/store/broker-a-s
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/broker-a-s/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/broker-a-s/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/broker-a-s/index

启动

分别启动nameserver

cd /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/bin

nohup sh mqnamesrv &

启动第一个服务器 192.168.33.130

Broker-a

cd /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/bin

nohup sh mqbroker -c /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/conf/2m-2s-sync/broker-a.properties &

Broker-b-s

cd /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/bin

nohup sh mqbroker -c /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/conf/2m-2s-sync/broker-b-s.properties &

启动第二个服务器 192.168.33.131

Broker-b

cd /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/bin

nohup sh mqbroker -c /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/conf/2m-2s-sync/broker-b.properties &

Broker-a-s

cd /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/bin

nohup sh mqbroker -c /usr/local/rocketmq/rocketmq-all-4.9.0-bin-release/conf/2m-2s-sync/broker-a-s.properties &

通过jps查看是否启动

# 查看nameServer日志

tail -500f ~/logs/rocketmqlogs/namesrv.log

# 查看broker日志

tail -500f ~/logs/rocketmqlogs/broker.log

也可以直接使用命令jps

问题解决

启动nameserver正常, 但是broker启动报错:

java.io.FileNotFoundException: /usr/local/rocketmq/store/broker-a/config/consumerFilter.json.tmp (没有那个文件或目录)

原因是权限不够, 给目录/usr/local/rocketmq/store 直接设置成 全部读写, 777权限

sudo chmod -R 777 store/

配置权限后即可启动成功

测试完成关闭

sh mqshutdown broker

sh mqshutdown namesrv

代码苦手呜
关注
  • 4
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
【RocketMQ】ubuntu18下部署RocketMQ集群
alwayszmj
06-23 404
ubuntu18下部署RocketMQ集群
Ubuntu下rocketmq的搭建
Shannon_1997的博客
05-01 1330
    上个月老师让完成消息中间件的环境搭建，自选消息中间件，在此选择rocketmq，由于在环境配置走了许多弯路，现在回忆记录一下。（文字为ubuntu14.04下的命令，图片为centos下的命令，二者差别不大。）参考文章：JDK的安装Linux下安装rocketmqRocketMQ最佳实践偏头痛场的rocketmq4.x的入门RocketMQ环境要求（jdk、maven以及git工具下载与配...
rocketmq4.0集群部署
Arno_e的博客
06-22 533
一．学习前概念理解 生产者（Producer）：消息发送方，将业务系统中产生的消息发送到brokers（brokers可以理解为消息代理，生产者和消费者之间是通过brokers进行消息的通信），rocketmq提供了以下消息发送方式：同步、异步、单向。 生产者组（Producer Group）：相同角色的生产者被归为同一组，比如通常情况下一个服务会部署多个实例，这多个实例就是一个组，生产者分组...
ubuntu安装RocketMQ 全过程
mario08的博客
07-13 5972
RocketMQ官网地址： http://rocketmq.apache.org/docs/quick-start/ 英文好的可以直接阅读，不好的还有一键翻译 在左侧的Quick Start栏可以看到安装mq的前期准备工作包括下载mq源文件，JDK，maven，git，4g＋空间。下面我们就一步一步来安装rocketmq吧，过程和上面列出的有一点不一样。 具体过程 安装jdk java官网地址:https://www.oracle.com/java/technologies/javase/javase-j
使用Ubuntu16.04搭建RocketMQ集群(2主2从)
我能在河边钓一整天的鱼
04-03 414
创建2个master 创建第一个nameserver docker create -p 9876:9876 --name rmqserver01 \ -e "JAVA_OPT_EXT=-server -Xms128m -Xmx128m -Xmn128m" \ -e "JAVA_OPTS=-Duser.home=/opt" \ -v /haoke/rmq/rmqserver01...
ubuntu搭建rocketmq集群，rocketmq集群部署 4.9.4 版本（非docker）
yssa1125001的博客
08-31 800
ubuntu搭建rocketmq集群，rocketmq集群部署 4.9.4 版本（非docker）
rocketmq集群搭建笔记
西城风雨楼
09-15 751
本次搭建的是双Master+双Slave集群模式笔记最后记录了本次安装出现的一些问题，以及解决方法。
详解搭建ubuntu版hadoop集群
09-15
本篇文章主要介绍了详解搭建ubuntu版hadoop集群，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
Ubuntu多主机集群搭建.md
03-06
基于ubuntu的k8s多主机集群搭建
ubuntu docker搭建Hadoop集群环境的方法
01-20
spark要配合Hadoop的hdfs使用，然而Hadoop的特点就是分布式，在一台主机上搭建集群有点困难，百度后发现可以使用docker构建搭建，于是开搞： github项目：https://github.com/kiwenlau/hadoop-cluster-docker ...
linux环境下rocketMq双master集群搭建
congge
06-07 2114
为什么要使用集群 在生产环境中，经常会有意外的情况发生，对于rocketmq也不例外，单节点情况下，如果出现网络闪断，服务器掉电或宕机之类的，如果服务器不能及时恢复，很可能造成丢消息的情况，因此，集群环境下可以保证服务的高可靠用性。 rocketMq集群模式 RocketMQ的集群部署方式有多种，其中包括单个Master、多个Master、多Master多Slave模式（异步复制）以及多Maste...
ubuntu如何查看ip地址
最新发布
xuxu_123_的博客
06-13 95
这里inet后跟的内容就是IP地址。这里inet后跟的内容就是IP地址。
XUbuntu24.04之制作ISO镜像启动盘(二百四十八)
Android系统攻城狮
06-11 827
本篇目的：上一篇，我们已经介绍了如何格式化U盘，这一节我们为电脑制作一个XUbuntu24.04ISO镜像启动盘。注意：1.fat32格式只支持4GB以下，因为Xubuntu24.04是4.1GB，已经超过了4GB。2.所以将U盘格式化为ExFat格式后，再制作ISO镜像即可。3.亲测：Ubuntu20.0以上支持exfat格式，如果碰到不识别Exfat格式的U盘，安装exfat工具。4.安装exfat格式支持：系统ISO镜像启动盘是一种常见的启动介质，用于安装或恢复操作系统。
Ubuntu下ClickHouse安装
HowieMen的博客
06-10 279
这样同内网的其他机器即可通过远程9000端口来访问该clickhouse, 否则其只能提供本地访问服务。用 root 身份运行, 注意在install那一步, 不要设置密码。如果service启动不了, 可以手动启动。如果没有, 创建该文件, 添加如下内容。如果不小心设置了密码, 设置。再重启clickhouse。
ubuntu 深度学习服务器搭建
Gaoithe的博客
06-12 122
【代码】ubuntu 剪切板管理。
Ubuntu22.04之解决：无法关机和重启问题(二百四十三)
Android系统攻城狮
06-08 1002
本篇目的：Ubuntu22.04之解决：无法关机和重启问题Ubuntu 22.04 LTS（长期支持版）是 Canonical 公司推出的最新版 Ubuntu 操作系统，代号为 “Jammy Jellyfish”。该版本于2022年4月发布，标志着 Ubuntu 系列的又一次重大更新。Ubuntu 22.04 基于Linux内核5.15，为用户提供了一个稳定、安全且功能丰富的操作系统。
ubuntu18.04环境下，arduino ide在打开串口监视器时报错
m0_63715549的博客
06-07 516
从输出可以看到，/home/lzx/.jssc/linux/libjSSC-2.8_x86_64.so 文件大小为0字节，这确实表明文件已损坏或不完整。1.首先，检查该文件的大小，以确认它是否真的损坏。一个正常的 .so 文件不应该是“file too short”（文件太短）。这个错误表明 libjSSC-2.8_x86_64.so 文件可能已损坏或不完整。ubuntu18.04环境下，arduino ide在打开串口监视器时报错。2.下载新的 libjSSC-2.8_x86_64.so 文件。
Ubuntu搭建hadoop集群
06-07
以下是在Ubuntu下搭建Hadoop集群的步骤： 1. 安装Java环境： ``` sudo apt-get update sudo apt-get install default-jdk ``` 2. 下载Hadoop软件： ``` wget ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值