一、MQ引言
1.1 MQ的概念
MQ(Message Quene)
: 翻译为消息队列,通过典型的生产者和消费者模型,生产者不断向消息队列中生产消息,消费者不断的从队列中获取消息。- 因为消息的生产和消费都是异步的,而且只关心消息的发送和接收,没有业务逻辑的侵入,轻松的实现系统间解耦。
- 别名为 消息中间件通过利用高效可靠的消息传递机制进行平台无关的数据交流,并基于数据通信来进行分布式系统的集成。
1.2 MQ的分类
- 当今市面上有很多主流的消息中间件,如老牌的
ActiveMQ
、RabbitMQ
,炙手可热的Kafka
,阿里巴巴自主开发RocketMQ
等。
1.3 不同MQ之间的对比
ActiveMQ
:ActiveMQ
是Apache
出品,最流行的,能力强劲的开源消息总线。它是一个完全支持JMS
规范的的消息中间件。丰富的API
,多种集群架构模式让ActiveMQ
在业界成为老牌的消息中间件,在中小型企业颇受欢迎!Kafka
:Kafka
是LinkedIn
开源的分布式发布-订阅消息系统,目前归属于Apache
顶级项目。Kafka
主要特点是基于Pull
的模式来处理消息消费,追求高吞吐量,一开始的目的就是用于日志收集和传输。0.8版本开始支持复制,不支持事务,对消息的重复、丢失、错误没有严格要求,适合产生大量数据的互联网服务的数据收集业务。RocketMQ
:RocketMQ
是阿里开源的消息中间件,它是纯Java
开发,具有高吞吐量、高可用性、适合大规模分布式系统应用的特点。RocketMQ
思路起源于Kafka
,但并不是Kafka
的一个Copy
,它对消息的可靠传输及事务性做了优化,目前在阿里集团被广泛应用于交易、充值、流计算、消息推送、日志流式处理、binglog
分发等场景。RabbitMQ
:RabbitMQ
是使用Erlang
语言开发的开源消息队列系统,基于AMQP
协议来实现。AMQP
的主要特征是面向消息、队列、路由(包括点对点和发布/订阅)、可靠性、安全。AMQP
协议更多用在企业系统内对数据一致性、稳定性和可靠性要求很高的场景,对性能和吞吐量的要求还在其次。RabbitMQ
比Kafka
可靠,Kafka
更适合IO
高吞吐的处理,一般应用在大数据日志处理或对实时性(少量延迟),可靠性(少量丢数据)要求稍低的场景使用,比如ELK
日志收集。
二、RabbitMQ 的引言
2.1 RabbitMQ
- 基于
AMQP
协议,erlang
语言开发,是部署最广泛的开源消息中间件,是最受欢迎的开源消息中间件之一。 AMQP
协议:AMQP(advanced message queuing protocol)
在2003年时被提出,最早用于解决金融领不同平台之间的消息传递交互问题。顾名思义,AMQP
是一种协议,更准确的说是一种binary wire-level protocol
(链接协议)。这是其和JMS
的本质差别,AMQP
不从API
层进行限定,而是直接定义网络交换的数据格式。这使得实现了AMQP
的provider
天然性就是跨平台的。以下是AMQP
协议模型:
2.2 RabbitMQ的安装
-
下载:
# 版本选型 https://www.rabbitmq.com/which-erlang.html # 下载erlang wget https://github.com/rabbitmq/erlang-rpm/releases/download/v23.3.1/erlang-23.3.1-1.el7.x86_64.rpm # 下载rabbitmq wget https://github.com/rabbitmq/rabbitmq-server/releases/download/v3.8.11/rabbitmq-server-3.8.11-1.el7.noarch.rpm
-
安装
Erlang
依赖包:rpm -ivh erlang-23.3.1-1.el7.x86_64.rpm
-
安装
RabbitMQ
安装包(需要联网):yum install -y rabbitmq-server-3.8.11-1.el7.noarch.rpm #注意:默认安装完成后配置文件模板在:/usr/share/doc/rabbitmq-server-3.8.14/rabbitmq.config.example目录中, #需要 将配置文件复制到/etc/rabbitmq/目录中,并修改名称为rabbitmq.config #如果安装报错 yum install socat
-
复制配置文件
cp /usr/share/doc/rabbitmq-server-3.8.11/rabbitmq.config.example /etc/rabbitmq/rabbitmq.config #这个版本没有example (目的是使用guest能够登陆) vim /etc/rabbitmq/rabbitmq.config [{rabbit, [{loopback_users, []}]}].
-
启动
rabbitmq
中的插件管理:rabbitmq-plugins enable rabbitmq_management
-
启动
RabbitMQ
的服务:systemctl start rabbitmq-server systemctl restart rabbitmq-server systemctl stop rabbitmq-server
-
查看服务状态:
systemctl status rabbitmq-server
-
关闭防火墙服务:
systemctl disable firewalld Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service. Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service. systemctl stop firewalld
-
访问
web
管理界面:http://10.15.0.8:15672/ guest guest
2.3 web管理界面介绍
-
overview
概览:connections
:无论生产者还是消费者,都需要与RabbitMQ
建立连接后才可以完成消息的生产和消费,在这里可以查看连接情况.channels
:通道,建立连接后,会形成通道,消息的投递获取依赖通道.Exchanges
:交换机,用来实现消息的路由.Queues
:队列,即消息队列,消息存放在队列中,等待消费,消费后被移除队列。
-
Admin
用户和虚拟主机管理:-
添加用户:
- 超级管理员(
administrator
):可登陆管理控制台,可查看所有的信息,并且可以对用户,策略(policy
)进行操作. - 监控者(
monitoring
):可登陆管理控制台,同时可以查看rabbitmq
节点的相关信息(进程数,内存使用情况,磁盘使用情况等). - 策略制定者(
policymaker
):可登陆管理控制台, 同时可以对policy
进行管理。但无法查看节点的相关信息. - 普通管理者(
management
):仅可登陆管理控制台,无法看到节点信息,也无法对策略进行管理. - 其他:无法登陆管理控制台,通常就是普通的生产者和消费者。
- 超级管理员(
-
创建虚拟主机:
- 虚拟主机为了让各个用户可以互不干扰的工作,
RabbitMQ
添加了虚拟主机(Virtual Hosts
)的概念。其实就是一个独立的访问路径,不同用户使用不同路径,各自有自己的队列、交换机,互相不会影响。
- 虚拟主机为了让各个用户可以互不干扰的工作,
-
绑定虚拟主机和用户:
-
三、RabbitMQ的入门程序
3.1 AMQP协议的回顾
3.2 RabbitMQ支持的消息模型
3.3 引入依赖
<dependency>
<groupId>com.rabbitmq</groupId>
<artifactId>amqp-client</artifactId>
<version>5.7.2</version>
</dependency>
3.4 第一种模型(直连)
-
P
:生产者,也就是要发送消息的程序. -
C
:消费者:消息的接受者,会一直等待消息到来. -
queue
:消息队列,图中红色部分。类似一个邮箱,可以缓存消息;生产者向其中投递消息,消费者从其中取出消息。 -
生产者:
public static void main(String[] args) throws IOException, TimeoutException { //创建连接工厂 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("101.20.142.277"); connectionFactory.setPort(5672); connectionFactory.setUsername("ems"); connectionFactory.setPassword("123"); connectionFactory.setVirtualHost("/ems"); Connection connection = connectionFactory.newConnection(); //创建通道 Channel channel = connection.createChannel(); //通道绑定对应的队列 //参数1:队列名称 参数2: 是否持久化 参数3:是否独占队列 参数4:是否自动删除 参数5:其他属性 channel.queueDeclare("hello",true,false,false,null); //发布消息 //参数1:交换机名称 参数2:队列名称 参数3:额外参数设置 参数4:消息内容 channel.basicPublish("","hello", null,"hello rabbitmq".getBytes()); channel.close(); connection.close(); }
-
消费者:
public static void main(String[] args) throws IOException, TimeoutException { //创建连接工厂 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("101.20.142.277"); connectionFactory.setPort(5672); connectionFactory.setUsername("ems"); connectionFactory.setPassword("123"); connectionFactory.setVirtualHost("/ems"); Connection connection = connectionFactory.newConnection(); Channel channel = connection.createChannel(); channel.queueDeclare("hello", true, false, false, null); //消费消息 //参数1:队列名称 参数2:开启消息的自动确认 参数3:消费时的回调接口 channel.basicConsume("hello",true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) { System.out.println(new String(body)); } }); } //结果 hello rabbitmq hello rabbitmq hello rabbitmq hello rabbitmq
3.5 第二种模型(work quene)
-
Work queues
,也被称为(Task queues
),任务模型。当消息处理比较耗时的时候,可能生产消息的速度会远远大于消息的消费速度。长此以往,消息就会堆积越来越多,无法及时处理。此时就可以使用work
模型:让多个消费者绑定到一个队列,共同消费队列中的消息。队列中的消息一旦消费,就会消失,因此任务是不会被重复执行的。
P
:生产者:任务的发布者.C1
:消费者-1,领取任务并且完成任务,假设完成速度较慢.C2
:消费者-2:领取任务并完成任务,假设完成速度快。
-
工具类:
public class RabbitMQUtils { /** * 提供创建链接的方法 * @return */ public static Connection getConnection(){ try { //创建连接工厂 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("101.20.142.277"); connectionFactory.setPort(5672); connectionFactory.setUsername("ems"); connectionFactory.setPassword("123"); connectionFactory.setVirtualHost("/ems"); return connectionFactory.newConnection(); }catch (Exception e){ e.printStackTrace(); } return null; } /** * 关闭连接 * @param channel * @param connection */ public static void close(Channel channel,Connection connection){ try { if (channel != null){channel.close();} if (connection != null){connection.close();} }catch (Exception e){ e.printStackTrace(); } } }
-
生产者:
public static void main(String[] args) throws IOException{ Connection connection = RabbitMQUtils.getConnection(); //创建通道 Channel channel = connection.createChannel(); //通道绑定对应的队列 channel.queueDeclare("work", true, false, false, null); for (int i = 0; i < 10; i++) { channel.basicPublish("", "work", null, (i+"====>:我是消息").getBytes()); } RabbitMQUtils.close(channel,connection); }
-
消费者1:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); channel.queueDeclare("work",true,false,false,null); channel.basicConsume("work",true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者1: "+new String(body)); } }); } //结果 消费者1: 0====>:我是消息 消费者1: 2====>:我是消息 消费者1: 4====>:我是消息 消费者1: 6====>:我是消息 消费者1: 8====>:我是消息
-
消费者2:
public static void main(String[] args) throws IOException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); channel.queueDeclare("work",true,false,false,null); channel.basicConsume("work",true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { try { Thread.sleep(1000); //处理消息比较慢 一秒处理一个消息 } catch (InterruptedException e) { e.printStackTrace(); } System.out.println("消费者2: "+new String(body)); } }); } //结果 消费者2: 1====>:我是消息 消费者2: 3====>:我是消息 消费者2: 5====>:我是消息 消费者2: 7====>:我是消息 消费者2: 9====>:我是消息
-
总结:默认情况下,
RabbitMQ
将按顺序将每个消息发送给下一个使用者。平均而言,每个消费者都会收到相同数量的消息。这种分发消息的方式称为循环。 -
消息自动确认机制:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); channel.queueDeclare("work",true,false,false,null); channel.basicQos(1);//一次只接受一条未确认的消息 channel.basicConsume("work",false,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者1: "+new String(body)); //参数1:确定队列中那个消息 参数2:是否开启多个消息同时确认 channel.basicAck(envelope.getDeliveryTag(),false);//手动确认消息 } }); }
- 设置通道一次只能消费一个消息.
- 关闭消息的自动确认,开启手动确认消息.
3.6 第三种模型(fanout)
-
fanout
扇出:也称为广播.
-
在广播模式下,消息发送流程:
- 可以有多个消费者.
- 每个消费者有自己的
queue
(队列). - 每个队列都要绑定到
Exchange
(交换机). - 生产者发送的消息,只能发送到交换机,交换机来决定要发给哪个队列,生产者无法决定.
- 交换机把消息发送给绑定过的所有队列.
- 队列的消费者都能拿到消息。实现一条消息被多个消费者消费。
-
生产者:
public static void main(String[] args) throws IOException{ //获取连接 Connection connection = RabbitMQUtils.getConnection(); //创建通道 Channel channel = connection.createChannel(); //声明交换机,参数1:交换机名称 参数2:交换机的类型 fanout 广播类型 channel.exchangeDeclare("logs","fanout");//广播 一条消息多个消费者同时消费 //发布消息 channel.basicPublish("logs","",null,"hello".getBytes()); //释放资源 RabbitMQUtils.close(channel,connection); }
-
消费者1:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //绑定交换机 channel.exchangeDeclare("logs","fanout"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //将临时队列绑定exchange channel.queueBind(queue,"logs",""); //处理消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者1: "+new String(body)); } }); } //结果 消费者1: hello
-
消费者2:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //绑定交换机 channel.exchangeDeclare("logs","fanout"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //将临时队列绑定exchange channel.queueBind(queue,"logs",""); //处理消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者2: "+new String(body)); } }); } //结果 消费者2: hello
3.7 第四种模型(Routing)-Direct(直连)
-
在
Fanout
模式中,一条消息,会被所有订阅的队列都消费。但是,在某些场景下,我们希望不同的消息被不同的队列消费。这时就要用到Direct
类型的Exchange
。 -
Direct
模型:- 队列与交换机的绑定,不能是任意绑定了,而是要指定一个
RoutingKey
(路由key
)消息的发送方在向Exchange发送消息时,也必须指定消息的RoutingKey
. Exchange
不再把消息交给每一个绑定的队列,而是根据消息的Routing Key
进行判断,只有队列的Routingkey
与消息的Routing key
完全一致,才会接收到消息。
P
:生产者,向Exchange
发送消息,发送消息时,会指定一个routing key
.X
:Exchange
(交换机),接收生产者的消息,然后把消息递交给 与routing key
完全匹配的队列.C1
:消费者,其所在队列指定了需要routing key
为error
的消息.C2
:消费者,其所在队列指定了需要routing key
为info、error、warning
的消息。
- 队列与交换机的绑定,不能是任意绑定了,而是要指定一个
-
生产者
public static void main(String[] args) throws IOException{ //获取连接 Connection connection = RabbitMQUtils.getConnection(); //创建通道 Channel channel = connection.createChannel(); //声明交换机 参数1:交换机名称 参数2:交换机类型 基于指令的Routing key转发 channel.exchangeDeclare("logs_direct","direct"); String key = "error"; //发布消息 channel.basicPublish("logs_direct",key,null,("指定的route key"+key+"的消息").getBytes()); //释放资源 RabbitMQUtils.close(channel,connection); }
-
生产者1:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //声明交换机 channel.exchangeDeclare("logs_direct","direct"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //绑定队列和交换机 channel.queueBind(queue,"logs_direct","error"); channel.queueBind(queue,"logs_direct","info"); channel.queueBind(queue,"logs_direct","warn"); //消费消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者1: "+new String(body)); } }); } //结果 消费者1: 指定的route keyinfo的消息 消费者1: 指定的route keyerror的消息
-
消费者2:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //声明交换机 channel.exchangeDeclare("logs_direct","direct"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //绑定队列和交换机 channel.queueBind(queue,"logs_direct","error"); //消费消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者2: "+new String(body)); } }); }
3.8 第五种模型(Routing)-Topic
-
统配符:
* (star) can substitute for exactly one word.
: 匹配不多不少恰好1个词.# (hash) can substitute for zero or more words.
:匹配一个或多个词。
-
生产者:
public static void main(String[] args) throws IOException{ //获取连接 Connection connection = RabbitMQUtils.getConnection(); //创建通道 Channel channel = connection.createChannel(); //生命交换机和交换机类型 topic 使用动态路由(通配符方式) channel.exchangeDeclare("topics","topic"); String routekey = "user.save.insert";//动态路由key //发布消息 channel.basicPublish("topics",routekey,null,("这是路由中的动态订阅模型,route key: ["+routekey+"]").getBytes()); //释放资源 RabbitMQUtils.close(channel,connection); }
-
消费者1:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //声明交换机 channel.exchangeDeclare("topics","topic"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //绑定队列与交换机并设置获取交换机中动态路由 channel.queueBind(queue,"topics","user.*"); //消费消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者1: "+new String(body)); } }); } //结果 消费者1: 这是路由中的动态订阅模型,route key: [user.save]
-
消费者2:
public static void main(String[] args) throws IOException, TimeoutException { Connection connection = RabbitMQUtils.getConnection(); Channel channel = connection.createChannel(); //声明交换机 channel.exchangeDeclare("topics","topic"); //创建临时队列 String queue = channel.queueDeclare().getQueue(); //绑定队列与交换机并设置获取交换机中动态路由 channel.queueBind(queue,"topics","user.#"); //消费消息 channel.basicConsume(queue,true,new DefaultConsumer(channel){ @Override public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { System.out.println("消费者2: "+new String(body)); } }); } //结果 消费者2: 这是路由中的动态订阅模型,route key: [user.save] 消费者2: 这是路由中的动态订阅模型,route key: [user.save.insert]
四、SpringBoot整合RabbitMQ
4.1 搭建初始环境
-
引入依赖:
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-test</artifactId> </dependency> <dependency> <groupId>org.springframework.amqp</groupId> <artifactId>spring-rabbit-test</artifactId> </dependency>
-
配置文件:
spring: application: name: springboot_rabbitmq rabbitmq: host: 101.20.142.277 port: 5672 username: ems password: 123 virtual-host: /ems
-
测试:
@SpringBootTest(classes = Application.class) @RunWith(SpringRunner.class) public class RabbitMQTest { @Autowired private RabbitTemplate rabbitTemplate; }
4.2 第一种hello world模型
-
生产者:
@Test public void testHello(){ rabbitTemplate.convertAndSend("hello","hello world"); }
-
消费者:
@Component @RabbitListener(queuesToDeclare = @Queue("hello")) public class HelloCustomer { @RabbitHandler public void receive1(String message){ System.out.println("message = " + message); } }
4.3 第二种work模型
-
生产者:
@Test public void testFanout() throws InterruptedException { rabbitTemplate.convertAndSend("logs","","这是日志广播"); }
-
消费者:
@Component public class FanoutCustomer { @RabbitListener(bindings = @QueueBinding( value = @Queue, //创建临时队列 exchange = @Exchange(name="logs",type = "fanout") //绑定交换机 )) public void receive1(String message){ System.out.println("message1 = " + message); } @RabbitListener(bindings = @QueueBinding( value = @Queue, //创建临时队列 exchange = @Exchange(name="logs",type = "fanout") //绑定交换机类型 )) public void receive2(String message){ System.out.println("message2 = " + message); } }
4.4 第三种Fanout广播模型
-
生产者:
@Test public void testFanout() throws InterruptedException { rabbitTemplate.convertAndSend("logs","","这是日志广播"); }
-
消费者:
@Component public class FanoutCustomer { @RabbitListener(bindings = @QueueBinding( value = @Queue, //创建临时队列 exchange = @Exchange(name="logs",type = "fanout") //绑定交换机 )) public void receive1(String message){ System.out.println("message1 = " + message); } @RabbitListener(bindings = @QueueBinding( value = @Queue, //创建临时队列 exchange = @Exchange(name="logs",type = "fanout") //绑定交换机类型 )) public void receive2(String message){ System.out.println("message2 = " + message); } }
4.5 第四种Route路由模型
-
生产者:
@Test public void testDirect(){ rabbitTemplate.convertAndSend("directs","error","error 的日志信息"); }
-
消费者:
@Component public class DirectCustomer { @RabbitListener(bindings ={ @QueueBinding( value = @Queue(), key={"info","error"}, exchange = @Exchange(type = "direct",name="directs") )}) public void receive1(String message){ System.out.println("message1 = " + message); } @RabbitListener(bindings ={ @QueueBinding( value = @Queue(), key={"error"}, exchange = @Exchange(type = "direct",name="directs") )}) public void receive2(String message){ System.out.println("message2 = " + message); } }
4.6 第五种Topic订阅模型(动态路由模型)
-
生产者:
@Test public void testTopic(){ rabbitTemplate.convertAndSend("topics","user.save.findAll","user.save.findAll 的消息"); }
-
消费者:
@Component public class TopCustomer { @RabbitListener(bindings = { @QueueBinding( value = @Queue, key = {"user.*"}, exchange = @Exchange(type = "topic",name = "topics") ) }) public void receive1(String message){ System.out.println("message1 = " + message); } @RabbitListener(bindings = { @QueueBinding( value = @Queue, key = {"user.#"}, exchange = @Exchange(type = "topic",name = "topics") ) }) public void receive2(String message){ System.out.println("message2 = " + message); } }
五、MQ的应用场景
5.1 异步处理
-
场景说明:用户注册后,需要发注册邮件和注册短信,传统的做法有两种 1.串行的方式 2.并行的方式.
-
串行方式: 将注册信息写入数据库后,发送注册邮件,再发送注册短信,以上三个任务全部完成后才返回给客户端。 这有一个问题是,邮件,短信并不是必须的,它只是一个通知,而这种做法让客户端等待没有必要等待的东西.
-
并行方式: 将注册信息写入数据库后,发送邮件的同时,发送短信,以上三个任务完成后,返回给客户端,并行的方式能提高处理的时间.
-
消息队列:假设三个业务节点分别使用50ms,串行方式使用时间150ms,并行使用时间100ms。虽然并行已经提高的处理时间,但是,前面说过,邮件和短信对我正常的使用网站没有任何影响,客户端没有必要等着其发送完成才显示注册成功,应该是写入数据库后就返回. 消息队列: 引入消息队列后,把发送邮件,短信不是必须的业务逻辑异步处理 .
-
由此可以看出,引入消息队列后,用户的响应时间就等于写入数据库的时间+写入消息队列的时间(可以忽略不计),引入消息队列后处理后,响应时间是串行的3倍,是并行的2倍。
5.2 应用解耦
- 场景:双11是购物狂节,用户下单后,订单系统需要通知库存系统,传统的做法就是订单系统调用库存系统的接口.
- 这种做法有一个缺点:当库存系统出现故障时,订单就会失败。 订单系统和库存系统高耦合. 引入消息队列 .
- 订单系统:用户下单后,订单系统完成持久化处理,将消息写入消息队列,返回用户订单下单成功.
- 库存系统:订阅下单的消息,获取下单消息,进行库操作。 就算库存系统出现故障,消息队列也能保证消息的可靠投递,不会导致消息丢失.
- 这种做法有一个缺点:当库存系统出现故障时,订单就会失败。 订单系统和库存系统高耦合. 引入消息队列 .
5.4 流量削峰
- 场景: 秒杀活动,一般会因为流量过大,导致应用挂掉,为了解决这个问题,一般在应用前端加入消息队列。
- 作用:
- 可以控制活动人数,超过此一定阀值的订单直接丢弃.
- 可以缓解短时间的高流量压垮应用(应用程序按自己的最大处理能力获取订单) .
- 用户的请求,服务器收到之后,首先写入消息队列,加入消息队列长度超过最大值,则直接抛弃用户请求或跳转到错误页面.
- 秒杀业务根据消息队列中的请求信息,再做后续处理.