Java零基础——RocketMQ篇

最新推荐文章于 2024-05-15 16:15:20 发布
最新推荐文章于 2024-05-15 16:15:20 发布
阅读量2.4k 收藏 29
点赞数 48
分类专栏： Java零基础教学文档 文章标签： java-rocketmq java rocketmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_47946173/article/details/134798505
版权

1.RocketMQ简介

官网： http://rocketmq.apache.org/
在这里插入图片描述

RocketMQ是阿里巴巴2016年MQ中间件，使用Java语言开发，RocketMQ 是一款开源的分布式消息系统，基于高可用分布式集群技术，提供低延时的、高可靠的消息发布与订阅服务。同时，广泛应用于多个领域，包括异步通信解耦、企业解决方案、金融支付、电信、电子商务、快递物流、广告营销、社交、即时通信、移动应用、手游、视频、物联网、车联网等。

具有以下特点：

  1. l能够保证严格的消息顺序

  2. l提供丰富的消息拉取模式

  3. l高效的订阅者水平扩展能力

  4. l实时的消息订阅机制

  5. l亿级消息堆积能力

2.为什么要使用MQ

1，要做到系统解耦，当新的模块进来时，可以做到代码改动最小; 能够解耦

2，设置流程缓冲池，可以让后端系统按自身吞吐能力进行消费，不被冲垮; 能够削峰，限流

3，强弱依赖梳理能把非关键调用链路的操作异步化并提升整体系统的吞吐能力;能够异步

Mq的作用 削峰限流 异步 解耦合

2.1 定义
中间件（缓存中间件 redis memcache 数据库中间件 mycat canal 消息中间件mq ）

面向消息的中间件(message-oriented middleware0) MOM能够很好的解决以上的问题。

是指利用高效可靠的消息传递机制进行与平台无关（跨平台）的数据交流，并基于数据通信来进行分布式系统的集成。

通过提供消息传递和消息排队模型在分布式环境下提供应用解耦，弹性伸缩，冗余存储，流量削峰，异步通信，数据同步等

大致流程

发送者把消息发给消息服务器，消息服务器把消息存放在若干队列/主题中，在合适的时候，消息服务器会把消息转发给接受者。在这个过程中，发送和接受是异步的,也就是发送无需等待，发送者和接受者的生命周期也没有必然关系在发布pub/订阅sub模式下，也可以完成一对多的通信，可以让一个消息有多个接受者[微信订阅号就是这样的]
在这里插入图片描述

2.2 特点
2.2.1 异步处理模式
消息发送者可以发送一个消息而无需等待响应。消息发送者把消息发送到一条虚拟的通道(主题或队列)上;

消息接收者则订阅或监听该通道。一条信息可能最终转发给一个或多个消息接收者，这些接收者都无需对消息发送者做出回应。整个过程都是异步的。

案例：

也就是说，一个系统和另一个系统间进行通信的时候，假如系统A希望发送一个消息给系统B，让它去处理，但是系统A不关注系统B到底怎么处理或者有没有处理好，所以系统A把消息发送给MQ，然后就不管这条消息的“死活” 了，接着系统B从MQ里面消费出来处理即可。至于怎么处理，是否处理完毕，什么时候处理，都是系统B的事，与系统A无关。
在这里插入图片描述

这样的一种通信方式，就是所谓的“异步”通信方式，对于系统A来说，只要把消息发给MQ,然后系统B就会异步处去进行处理了，系统A不能“同步”的等待系统B处理完。这样的好处是什么呢？解耦

2.2.2 应用系统的解耦
发送者和接收者不必了解对方，只需要确认消息

发送者和接收者不必同时在线

2.2.3 现实中的业务
在这里插入图片描述

3.各个MQ产品的比较

在这里插入图片描述

4.RocketMQ重要概念【重点】

Producer：消息的发送者，生产者；举例：发件人

Consumer：消息接收者，消费者；举例：收件人

Broker：暂存和传输消息的通道；举例：快递

NameServer：管理Broker；举例：各个快递公司的管理机构 相当于broker的注册中心，保留了broker的信息

Queue：队列，消息存放的位置，一个Broker中可以有多个队列

Topic：主题，消息的分类

ProducerGroup：生产者组

ConsumerGroup：消费者组，多个消费者组可以同时消费一个主题的消息

消息发送的流程是，Producer询问NameServer，NameServer分配一个broker 然后Consumer也要询问NameServer，得到一个具体的broker，然后消费消息
在这里插入图片描述

5.生产和消费理解【重点】

在这里插入图片描述

6.RocketMQ安装

了解了mq的基本概念和角色以后，我们开始安装rocketmq，建议在linux上

6.1 下载RocketMQ
下载地址：https://rocketmq.apache.org/dowloading/releases/

注意选择版本，这里我们选择4.9.2的版本，后面使用alibaba时对应
在这里插入图片描述

下载地址：

https://archive.apache.org/dist/rocketmq/4.9.2/rocketmq-all-4.9.2-bin-release.zip

6.2 上传服务器
在root目录下创建文件夹

mkdir rocketmq

将下载后的压缩包上传到阿里云服务器或者虚拟机中去
在这里插入图片描述

6.3 解压
unzip rocketmq-all-4.9.2-bin-release.zip

如果你的服务器没有unzip命令，则下载安装一个

yum install unzip

目录分析
在这里插入图片描述

Benchmark：包含一些性能测试的脚本；

Bin：可执行文件目录；

Conf：配置文件目录；

Lib：第三方依赖；

LICENSE：授权信息;

NOTICE：版本公告；

6.4 配置环境变量
vi /etc/profile

在文件末尾添加

export NAMESRV_ADDR=阿里云公网IP:9876

刷新环境变量

source /etc/profile

6.5 修改nameServer的运行脚本
进入bin目录下，修改runserver.sh文件,将71行和76行的Xms和Xmx等改小一点

vi runserver.sh
在这里插入图片描述

保存退出

6.6 修改broker的运行脚本
进入bin目录下，修改runbroker.sh文件,修改67行
在这里插入图片描述

保存退出

6.7 修改broker的配置文件
进入conf目录下，修改broker.conf文件

brokerClusterName = DefaultCluster

brokerName = broker-a

brokerId = 0

deleteWhen = 04

fileReservedTime = 48

brokerRole = ASYNC_MASTER

flushDiskType = ASYNC_FLUSH

namesrvAddr=localhost:9876

autoCreateTopicEnable=true

brokerIP1=阿里云公网IP

添加参数解释

namesrvAddr：nameSrv地址 可以写localhost因为nameSrv和broker在一个服务器

autoCreateTopicEnable：自动创建主题，不然需要手动创建出来

brokerIP1：broker也需要一个公网ip，如果不指定，那么是阿里云的内网地址，我们再本地无法连接使用

6.8 启动
首先在安装目录下创建一个logs文件夹，用于存放日志

mkdir logs
在这里插入图片描述

一次运行两条命令

启动nameSrv

nohup sh bin/mqnamesrv > ./logs/namesrv.log &

启动broker 这里的-c是指定使用的配置文件

nohup sh bin/mqbroker -c conf/broker.conf > ./logs/broker.log &

查看启动结果
在这里插入图片描述

6.9 RocketMQ控制台的安装RocketMQ-Console
Rocketmq 控制台可以可视化MQ的消息发送！

旧版本源码是在rocketmq-external里的rocketmq-console，新版本已经单独拆分成dashboard

网址： https://github.com/apache/rocketmq-dashboard

下载地址：

https://github.com/apache/rocketmq-dashboard/archive/refs/tags/rocketmq-dashboard-1.0.0.zip

下载后解压出来，在跟目录下执行

mvn clean package -Dmaven.test.skip=true
在这里插入图片描述在这里插入图片描述

将jar包上传到服务器上去
在这里插入图片描述

然后运行

nohup java -jar ./rocketmq-dashboard-1.0.0.jar > ./rocketmq-4.9.2/logs/dashboard.log &

命令拓展:–server.port指定运行的端口

–rocketmq.config.namesrvAddr=127.0.0.1:9876 指定namesrv地址

访问： http://localhost:8001

运行访问端口是8001，如果从官网拉下来打包的话，默认端口是8080

nohup java -jar rocketmq-dashboard-1.0.0.jar --server.port=8081 --rocketmq.config.namesrvAddr=47.100.238.122:9876 > rocketmq-dashboard.log &
在这里插入图片描述

7.RocketMQ安装之docker

7.1 下载RockerMQ需要的镜像
docker pull rocketmqinc/rocketmq

docker pull styletang/rocketmq-console-ng

7.2 启动NameServer服务
7.2.1 创建NameServer数据存储路径
mkdir -p /home/rocketmq/data/namesrv/logs /home/rocketmq/data/namesrv/store

7.2.2 启动NameServer容器
docker run -d --name rmqnamesrv -p 9876:9876 -v /home/rocketmq/data/namesrv/logs:/root/logs -v /home/rocketmq/data/namesrv/store:/root/store -e “MAX_POSSIBLE_HEAP=100000000” rocketmqinc/rocketmq sh mqnamesrv

7.3 启动Broker服务
7.3.1 创建Broker数据存储路径
mkdir -p /home/rocketmq/data/broker/logs /home/rocketmq/data/broker/store

7.3.2 创建conf配置文件目录
mkdir /home/rocketmq/conf

7.3.3 在配置文件目录下创建broker.conf配置文件

# 所属集群名称，如果节点较多可以配置多个
brokerClusterName = DefaultCluster
#broker名称，master和slave使用相同的名称，表明他们的主从关系
brokerName = broker-a
#0表示Master，大于0表示不同的slave
brokerId = 0
#表示几点做消息删除动作，默认是凌晨4点
deleteWhen = 04
#在磁盘上保留消息的时长，单位是小时
fileReservedTime = 48
#有三个值：SYNC_MASTER，ASYNC_MASTER，SLAVE；同步和异步表示Master和Slave之间同步数据的机制；
brokerRole = ASYNC_MASTER
#刷盘策略，取值为：ASYNC_FLUSH，SYNC_FLUSH表示同步刷盘和异步刷盘；SYNC_FLUSH消息写入磁盘后才返回成功状态，ASYNC_FLUSH不需要；
flushDiskType = ASYNC_FLUSH
# 设置broker节点所在服务器的ip地址
brokerIP1 = 你服务器外网ip

7.3.4 启动Broker容器

docker run -d  --name rmqbroker --link rmqnamesrv:namesrv -p 10911:10911 -p 10909:10909 -v  /home/rocketmq/data/broker/logs:/root/logs -v /home/rocketmq/data/broker/store:/root/store -v /home/rocketmq/conf/broker.conf:/opt/rocketmq-4.4.0/conf/broker.conf --privileged=true -e "NAMESRV_ADDR=namesrv:9876" -e "MAX_POSSIBLE_HEAP=200000000" rocketmqinc/rocketmq sh mqbroker -c /opt/rocketmq-4.4.0/conf/broker.conf

7.4 启动控制台

docker run -d --name rmqadmin -e "JAVA_OPTS=-Drocketmq.namesrv.addr=你的外网地址:9876 \

-Dcom.rocketmq.sendMessageWithVIPChannel=false \

-Duser.timezone='Asia/Shanghai'" -v /etc/localtime:/etc/localtime -p 9999:8080 styletang/rocketmq-console-ng

7.5 正常启动后的docker ps
在这里插入图片描述

7.6 访问控制台
http://你的服务器外网ip:9999/
在这里插入图片描述

8.RocketMQ快速入门

RocketMQ提供了发送多种发送消息的模式，例如同步消息，异步消息，顺序消息，延迟消息，事务消息等，我们一一学习

8.1 消息发送和监听的流程
我们先搞清楚消息发送和监听的流程，然后我们在开始敲代码

8.1.1 消息生产者
1.创建消息生产者producer，并制定生产者组名

2.指定Nameserver地址

3.启动producer

4.创建消息对象，指定主题Topic、Tag和消息体等

5.发送消息

6.关闭生产者producer

8.1.2 消息消费者
1.创建消费者consumer，制定消费者组名

2.指定Nameserver地址

3.创建监听订阅主题Topic和Tag等

4.处理消息

5.启动消费者consumer

8.2 搭建Rocketmq-demo
8.2.1 加入依赖

<dependencies>
    <dependency>
        <groupId>org.apache.rocketmq</groupId>
        <artifactId>rocketmq-client</artifactId>
        <version>4.9.2</version>

        <!--docker的用下面这个版本-->

<version>4.4.0</version>
    </dependency>
    <dependency>
        <groupId>junit</groupId>
        <artifactId>junit</artifactId>
        <version>4.12</version>
    </dependency>
    <dependency>
        <groupId>org.projectlombok</groupId>
        <artifactId>lombok</artifactId>
        <version>1.18.22</version>
    </dependency>
</dependencies>

8.2.2 编写生产者

/**
 * 测试生产者
 *
 * @throws Exception
 */
@Test
public void testProducer() throws Exception {
   
    // 创建默认的生产者
    DefaultMQProducer producer = new DefaultMQProducer("test-group");
    // 设置nameServer地址
    producer.setNamesrvAddr("localhost:9876");
    // 启动实例
    producer.start();
    for (int i = 0; i < 10; i++) {
   
        // 创建消息
        // 第一个参数：主题的名字
        // 第二个参数：消息内容
        Message msg = new Message("TopicTest", ("Hello RocketMQ " + i).getBytes());
        SendResult send = producer.send(msg);
        System.out.println(send);
    }
    // 关闭实例
    producer.shutdown();
}

8.2.3 编写消费者

/**
     * 测试消费者
     *
     * @throws Exception
     */
    @Test
    public void testConsumer() throws Exception {
   
        // 创建默认消费者组
        DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("consumer-group"
最低0.47元/天 解锁文章
动力节点IT教育
关注
  • 48
    点赞
  • 踩
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
RocketMQ（15）——RocketMQ控制台
Elim的博客
09-06 3440
RocketMQ Console的顶部一共有8个菜单，OPS可以对控制台进行一些配置，主要是指定需要连接的NameServer的地址。可以通过某个Broker右边的Operation列中的STATUS按钮查看Broker的一些运行时信息，通过CONFIG按钮可以查看该Broker的配置信息。Message菜单可以从Topic、消息Key、消息ID三个维度来查询消息，查询完消息后可以查看消息的详细信息，也可以控制消息重新发送。该界面可以查看到所有的Topic信息，包括系统的一些Topic。
rocketmq可视化控制台最新版 rocketmq-console-ng-2.x
04-05
rocketmq可视化控制台最新版
RocketMQ入坑指南（二）：JAVA接入RocketMQ
u014374743的博客
02-03 1941
RocketMQ入坑指南（二）：JAVA接入RocketMQ
java调用rocketmq_java操作RocketMQ
weixin_42332144的博客
02-26 4635
创建工程(Producer和Consumer)导入依赖com.alibaba.rocketmqrocketmq-client3.0.10com.alibaba.rocketmqrocketmq-all3.0.10pomch.qos.logbacklogback-classic1.1.1ch.qos.logbacklogback-core1.1.1创建生产者package com.wn.produc...
RocketMQ-Dashboard 控制台使用详解
长江七号的博客
05-15 2181
RocketMq的，有运维页面，驾驶舱，集群页面，主题页面，消费者页面，生产者页面，发布管理页面，消息查询页面等，为开发和运维提供了强大的监控功能。
Java之RocketMQ详解
每天进步一点点...
07-22 8879
Java之RocketMQ详解
Java开发必备技能：RocketMQ
不积硅步，无以至千里
12-15 1620
官方文档可见：https://github.com/hiwei-zhang/rocketmq/tree/develop/docs/cn RocketMQ由以下这几个组件组成负责生产消息，一般由业务系统负责生产消息。一个消息生产者会把业务应用系统里产生的消息发送到broker服务器。RocketMQ提供多种发送方式，同步发送、异步发送、顺序发送、单向发送。同步和异步方式均需要Broker返回确认信息，单向发送不需要。 生产者中，会把同一类Producer组成一个集合，叫做生产者组，这类Producer发送同一
一文搞懂Java整合RocketMQ
做兴趣使然的Hero
09-15 3092
4 安装启动 4.1 下载 https://rocketmq.apache.org/dowloading/releases/ 4.2 安装 先决条件： 64bit OS, Linux/Unix/Mac is recommended;(Windows user see guide below) 64bit JDK 1.8+; Maven 3.2.x; Git; 4g+ free disk for Broker server 4.3 启动 （1）配置环境变量 （2）启动NameServer和Broker
rocketMQ —— 03（Java应用rocketmq）
a123123sdf的博客
09-06 3983
目录标题一、普通消息1、消息生产者Producer1.1、同步生产1.1、异步生产1.2、单向发送2、消息消费者Consumer2.1、消费者pull主动拉取2.2、broker向消费者push推送二、顺序消息 一、普通消息 1、消息生产者Producer 1.1、同步生产 package com.lihua.rocketmq.producer; import org.apache.rocketmq.client.exception.MQClientException; import org.apache
Java全能学习面试手册——Java面试题库.zip
10-01
Java全能学习面试手册——Java面试题库.zip 01 7道消息队列ActiveMQ面试题！.pdf 02 10道Java高级必备的Netty面试题！.pdf 03 10道Java面试必备的设计模式面试题！.pdf 04 10个Java经典的List面试题！.pdf 05 10个...
LG机构RocketMQ视频源码资料课件
12-21
1. **Java编程基础**：RocketMQ是用Java语言开发的，因此学习者需要具备扎实的Java基础，包括面向对象编程、多线程、集合框架等。了解Java的基本语法和特性对于理解RocketMQ的实现至关重要。 2. **RocketMQ概念解析...
rocketmq页面工具
最新发布
06-19
RocketMQ页面工具，通常指的是Apache RocketMQ社区提供的一个可视化管理界面——RocketMQ Dashboard。这个工具为RocketMQ用户提供了一个直观、方便的方式来监控和管理RocketMQ集群，包括但不限于查看消息发送与消费...
rocketmq-externals-master.zip
09-24
在这个"rocketmq-externals-master.zip"压缩包中，主要包含的是RocketMQ的监控端——RocketMQ-Console，因为从GitHub下载可能速度较慢，所以通过CDN提供了快速访问。 RocketMQ-Console是RocketMQ的Web管理控制台，...
rocketmq可视化jar包.zip
06-11
"rocketmq可视化jar包"包含了这些功能所需的Java Archive (JAR) 文件，用户可以通过部署这个JAR包在自己的服务器上搭建RocketMQ的可视化管理平台。部署时，需要确保服务器环境满足RocketMQ Console的运行要求，如...
【Java中间件】RocketMQ
Dae_Lzh的博客
07-26 1876
Message Queue，是一种提供消息队列服务的中间件。提供了消息生产、存储、消费全过程API的软件系统。
JAVA —— RocketMQ ①
weixin_50594210的博客
12-05 1792
文章目录今日内容1 概述2.MQ 的作用3.MQ的缺点4.常见产品5.RocketMQ入门5.1 基础概念1 消息生产者（Producer）2 消息消费者（Consumer）3 拉取式消费（Pull Consumer）4 推动式消费（Push Consumer）5 消息（Message）6 主题（Topic）7 标签（Tag）8 代理服务器（Broker Server）9 名字服务（Name Server）5.1 JDK5.2 RocketMQ6.消息发送6.1 消息发送(OneToOne)6.2 广播
RocketMQ之console监控平台使用详解(三)
weixin_33705053的博客
08-07 2852
以前看别人文章时，经常说文章写一半因为某某原因重新写。今天我也碰到了，上午写了三分之一，电脑锁屏，下午过来直接写文章的软件退出了。 简直日了狗。吸取教训。 一、序 现在网上“同质性”的技术文章太多了，本来想了解下rocketmq-console监控平台的文档使用，不知道是搜索姿势有问题还是没这需求，找到的全是rocketmq-console的部署安装。测试了很遍，结合理解，差不都搞懂了很多关于...
RocketMQ系列：rocketmq运维控制台使用详解（全网独家）
热门推荐
公众号-测试生财
09-24 1万+
搭建好了RocketMQ的console之后，直接在浏览器打开http://{你的ip}:8080 默认会进入到驾驶舱（dashboard）。 总览 整体横向菜单分为八个部分： 运维：主要是设置nameserver和配置vipchannel 驾驶舱：控制台的dashboard，可以分别按broker和主题来查看消息的数量和趋势。 集群：整个RocketMq的集群情况，包括分片，编号，地址，版本，消息生产和消息消费的TPS等，这个在做性能测试的时候可以作为数据指标。 主题：即topic，可以
RocketMQ 快速搭建与控制台搭建
Julie的博客
09-04 1457
RockerMQ 4.9.5 带你入门
Java基础教程——List（列表）
06-02
好的，下面是Java基础教程中有关List（列表）的内容： List是Java中最常用的数据结构之一，它是一个有序的集合，可以存储重复的元素。 常见的List实现类有ArrayList和LinkedList，其中ArrayList是基于数组实现的，而LinkedList是基于链表实现的。 下面是一些常用的List操作： 1. 创建List对象： ``` List<String> list = new ArrayList<>(); // 创建一个ArrayList对象 ``` 2. 添加元素： ``` list.add("apple"); // 在列表末尾添加元素 list.add(1, "banana"); // 在指定位置添加元素 ``` 3. 获取元素： ``` String fruit = list.get(0); // 获取列表中的第一个元素 ``` 4. 删除元素： ``` list.remove("apple"); // 删除指定元素 list.remove(0); // 删除指定位置的元素 ``` 5. 修改元素： ``` list.set(1, "orange"); // 修改指定位置的元素 ``` 6. 判断元素是否存在： ``` boolean contains = list.contains("apple"); // 判断列表中是否包含指定元素 ``` 7. 获取列表长度： ``` int size = list.size(); // 获取列表长度 ``` 以上就是Java基础教程中关于List的简单介绍，希望对你有所帮助！

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值