一、消息中间件简介
1.1、什么是什么MQ
MQ(Message Queue)是一种跨进程的通信机制,用于传递消息。通俗点说,就是一个先进先出的数据结构。有点像队列。
1.2、MQ的应用场景
1.2.1、异步解耦
最常见的一个场景是用户注册后,需要发送注册邮件和短信通知,以告知用户注册成功。传统的做法如下:
此架构下注册、邮件、短信三个任务全部完成后,才返回注册结果到客户端,用户才能使用账号登录。但是对于用户来说,注册功能实际只需要注册系统存储用户的账户信息后,该用户便可以登录,而后续的注册短信和邮件不是即时需要关注的步骤。
所以实际当数据写入注册系统后,注册系统就可以把其他的操作放入对应的消息队列 MQ 中然后马上返回用户结果,由消息队列 MQ 异步地进行这些操作。架构图如下:
异步解耦是消息队列 MQ 的主要特点,主要目的是减少请求响应时间和解耦。主要的使用场景就是将比较耗时而且不需要即时(同步)返回结果的操作作为消息放入消息队列。同时,由于使用了消息队列MQ,只要保证消息格式不变,消息的发送方和接收方并不需要彼此联系,也不需要受对方的影响,即解耦合。
1.2.2、流量削峰
流量削峰也是消息队列 MQ 的常用场景,一般在秒杀或团队抢购(高并发)活动中使用广泛。
在秒杀或团队抢购活动中,由于用户请求量较大,导致流量暴增,秒杀的应用在处理如此大量的访问流量后,下游的通知系统无法承载海量的调用量,甚至会导致系统崩溃等问题而发生漏通知的情况。为解决这些问题,可在应用和下游通知系统之间加入消息队列 MQ。
秒杀处理流程如下所述:
- 用户发起海量秒杀请求1到秒杀业务处理系统。
- 秒杀处理系统按照秒杀处理逻辑将满足秒杀条件的请求1发送到消息队列MQ。
- 下游的通知系统订阅1消息队列MQ的秒杀相关消息,再将1秒杀成功的消息发送到相关用户。
- 用户收到秒杀成功的通知。
1.3、常见的MQ产品
目前业界有很多MQ产品,比较出名的有:ZeroMQ、RabbitMQ、ActiveMQ、RocketMQ、Kafka。
1.3.1、ZeroMQ
号称最快的消息队列系统,尤其针对大吞吐量的需求场景。扩展性好,开发比较灵活,采用C语言实现,实际上只是一个socket库的重新封装,如果做为消息队列使用,需要开发大量的代码。ZeroMQ仅提供非持久性的队列,也就是说如果down机,数据将会丢失。
1.3.2、RabbitMQ
使用erlang语言开发,性能较好,适合于企业级的开发。但是不利于做二次开发和维护。
1.3.3、ActiveMQ
历史悠久的Apache开源项目。已经在很多产品中得到应用,实现了JMS1.1规范,可以和spring-jms轻松融合,实现了多种协议,支持持久化到数据库,对队列数较多的情况支持不好。
1.3.4、RocketMQ
阿里巴巴的MQ中间件,由java语言开发,性能非常好,能够撑住双十一的大流量,而且使用起来很简单。
1.3.5、Kafka
Kafka是Apache下的一个子项目,是一个高性能跨语言分布Publish/Subscribe消息队列系统,相对于ActiveMQ是一个非常轻量级的消息系统,除了性能非常好之外,还是一个工作良好的分布式系统。
二、RocketMQ入门
2.2、简介
RocketMQ是阿里巴巴开源的分布式消息中间件,现在是Apache的一个顶级项目。在阿里内部使用非常广泛,已经经过了"双11"这种万亿级的消息流转。
2.3、下载
RocketMQ官网
github
2.4、Windows安装
下载
我们先从官网去选择Binary下载,Binary代表是二进制版本,可以直接使用。
解压
- bin:启动脚本,包括shell脚本和CMD脚本
- conf:实例配置文件 ,包括broker配置文件、logback配置文件等
- lib:依赖jar包,包括Netty、commons-lang、FastJSON等
配置环境环境:ROCKETMQ_HOME
在电脑高级配置(配置jdk那边)配置环境变量,变量名为:ROCKETMQ_HOME,值为:MQ解压路径\MQ文件夹名。
修改配置文件
进入RocketMQ的conf文件,里面有一个broker.conf配置文件。在文件末尾添加两行。(输入的时候建议将中文去掉)
enablePropertyFilter=true <!--支持标签过滤-->
namesrvAddr=127.0.0.1:9876 <!--server服务的地址-->
启动nameserver
在MQ解压文件的bin目录下进入CMD的1命令行,执执行命令(或者双击mqnamesrv.cmd),启动nameserver,成功后会弹出提示框,不要关闭。
# 执行命令
start mqnamesrv.cmd
启动broker
在bin目录下cmd进入命令行模式,执行命令,启动broker。成功后不要关闭。
mqbroker.cmd -c ../conf/broker.conf
MQ可视化工具安装
可视化工具下载地址,密码6666
这个jar一定要JDK8的环境!!下载后修改application.properties文件,修改自己启动的端口和服务的ip+端口。集群按钮1那里出现了版本号说明启动成功!
2.4、Linux安装
这里使用的不是虚拟机,是阿里云的ECS服务器,系统版本为CentOs7。
上传RocketMQ
RocketMQ的下载包:密码6666
将RocketMQ的zip包上传到阿里云服务器,使用命令解压。
unzip /usr/soft/rocketmq-all-4.4.0-bin-release.zip # 这个目录要改为自己的RocketMQ
mv /usr/soft/rocketmq-all-4.4.0-bin-release/