消息队列RabbitMQ详解

一、概述

1. 大多 应用中 ，可通过消息服务中间件来提升系统异步通信、扩展解耦能力

2. 消息服务中 两个重要概念：

             消息代理（message broker）和目的地（destination）

             所谓的消息代理，就是消息中间件的服务器。我们要给消息队列中存取内容，就要连接消息中间件的服务器；

             当消息发送者发送消息以后，将由消息代理（服务器）接管，消息代理(服务器)接管到消息以后，保证消息传递到指定目的地。

3. 消息队列主要 有两种形式的 目的地

1. 队列（ queue ） ：点对点消息通信（ point-to-point ）

2. 主题（ topic ） ：发布（ publish ） / 订阅（ subscribe ）消息通信

4. 点对点式：

– 消息发送者发送消息，消息代理将其放入一个队列中，消息接收者从队列中获取消息内容，消息读取后被移 出队列

– 消息只有唯一的发送者和接受者，但并不是说只能有一个接收者

5. 发布订阅式：

– 发送者（发布者）发送消息到主题（topic），多个接收者（订阅者）监听（订阅）这个主题(消息)，那么就会在消息到达时同时收到消息

6.  JMS （ Java Message Service ） JAVA 消息 服务：

– 基于 JVM 消息代理的规范。 ActiveMQ 、 HornetMQ 是 JMS 实现

 

7.  AMQP （ Advanced Message Queuing Protocol ）

– 高级消息队列协议，也是一个消息代理的规范，兼容 JMS

– RabbitMQ 是 AMQP 的实现

	JMS	AMQP（跨平台）
定义	Java api	网络线级协议
跨语言	否	是
跨平台	否	是
Model	提供两种消息模型： （1）、Peer-2-Peer（点对点） （2）、Pub/sub （发布订阅）	提供了五种消息模型： （1）、direct exchange（点对点） （2）、fanout exchange （3）、topic change （4）、headers exchange （5）、system exchange 本质来讲，后四种和JMS的pub/sub模型没有太大差别，仅是在路由机制上做了更详细的划分；
支持消息类型	多种消息类型： TextMessage MapMessage BytesMessage StreamMessage ObjectMessage Message （只有消息头和属性）	byte[] 当实际应用时，有复杂的消息，可以将消息序列化后发送（字节数据）。
综合评价	JMS 定义了JAVA API层面的标准；在java体系中，多个client均可以通过JMS进行交互，不需要应用修改代码，但是其对跨平台的支持较差；	AMQP定义了wire-level层的协议标准；天然具有跨平台、跨语言特性。

8. Spring 支持

– spring- jms 提供了对 JMS 的支持

– spring-rabbit 提供了对 AMQP 的支持

– 需要 ConnectionFactory 的实现来连接消息代理

– 提供 JmsTemplate 、 RabbitTemplate 来发送消息

– @ JmsListener （ JMS ）、 @ RabbitListener （ AMQP ）注解在方法上监听消息代理发布的消息

– @ EnableJms 、 @ EnableRabbit 开启支持

–

9. Spring Boot 自动配置

– JmsAutoConfiguration

– RabbitAutoConfiguration

 

二、应用场景

• 异步处理：用户将注册好的信息写进数据库以后，将这些信息写进消息队列（时间极短）。只要消息写进消息队列，则立刻返回响应给用户，用户收到注册成功的响应。接下来的发送邮件和发送短信这些服务都可以通过异步读取的方式，从消息队列中取出用户信息，完成后面相应的发送邮件或短信业务。
• 应用解耦：订单系统和库存系统单独抽取出来，用微服务的方式抽取一个服务。只要用户下单，就将下单信息写进消息队列；那么库存系统通过订阅消息队列的消息内容。只要消息队列中有一个订单内容，库存系统就会马上收到该订单的信息，库存系统计算相关业务操作。
• 流量削峰：用户的请求（秒杀商品请求）直接进入消息队列，消息队列长度这能存储特定数量的消息数据。后面的请求立刻抛弃，响应秒杀失败。之后，秒杀的业务逻辑再处理消息队列的数据，取出数据处理。

 

 三、RabbitMQ简介

RabbitMQ简介：

RabbitMQ是一个由erlang开发的AMQP(Advanved Message Queue Protocol)的开源实现，消息中间件。

核心概念

Message

消息，消息是不具名的；它是发送者给消息代理（也就是消息队列服务器）发送的数据内容。

它由消息头和消息体组成。消息体是不透明的，而消息头则由一系列的可选属性组成，这些属性包括routing-key（路由键）、priority（相对于其他消息的优先权）、delivery-mode（指出该消息可能需要持久性存储）等。

• routing-key（路由键）：直接指定每一个消息要发给谁，类似于要将消息发到网络中，需要指定一个ip地址

Publisher

消息的生产者。它将消息Message先发送到服务器（消息代理message broker）；

而消息Message是发送给服务器（message broker）中的交换器（Exchange）

也是一个向交换器发布消息的客户端应用程序。

Exchange

交换器，用来接收生产者发送的消息并将这些消息路由给服务器中的队列。是高级消息队列中的一种组件。

消息发送到交换器，交换器上会绑定很多队列，交换器是通过routing-key（路由键）来决定的。路由键指定发送给谁。

Exchange有4种类型：direct(默认)，fanout, topic, 和headers，不同类型的Exchange转发消息的策略有所区别

• direct(默认)：实现JMS中点对点消息模型
• 后面三个可以实现发布订阅模型

总结：这些消息是通过交换器来决定发往哪个队列

Queue

消息队列，用来保存消息直到发送给消费者。它是消息的容器，也是消息的终点。一个消息可投入一个或多个队列。消息一直在队列里面，等待消费者连接到这个队列将其取走。

• 一个消息（Message）是如何抵达队列的？

首先是消息的生产者（Publisher）生产一个消息，消息先发送消息队列服务器，到达消息队列服务器中的交换器（Exchange），交换器根据发送的消息中所指定的routing-key（路由键），把消息分派到某个队列，消息队列服务器中可能有非常多的队列。这个规则相当于消息队列要跟交换器进行关联，这种关联关系称为Binding（绑定）。

 

Binding

绑定，用于消息队列和交换器之间的关联。一个绑定就是基于路由键将交换器和消息队列连接起来的路由规则，所以可以将交换器理解成一个由绑定构成的路由表。

Exchange 和Queue的绑定可以是多对多的关系。

Connection

网络连接，比如一个TCP连接。

Channel

信道，多路复用连接中的一条独立的双向数据流通道。信道是建立在真实的TCP连接内的虚拟连接，AMQP 命令都是通过信道发出去的，不管是发布消息、订阅队列还是接收消息，这些动作都是通过信道完成。因为对于操作系统来说建立和销毁 TCP 都是非常昂贵的开销，所以引入了信道的概念，以复用一条 TCP 连接。

• 每次去消息队列中取出一个消息，都建立一条TCP连接，这样非常耗费资源。所以，消息队列服务器跟交换器建立连接时，是建立一条TCP连接。若需要获取数据，那么就在该TCP连接开辟多个信道。信道Channel是真正进行发送数据、订阅、接收消息用的通道。节省资源。
   

Consumer

消息的消费者，表示一个从消息队列中取得消息的客户端应用程序。接受消息。

Virtual Host

虚拟主机，表示一批交换器、消息队列和相关对象。虚拟主机是共享相同的身份认证和加密环境的独立服务器域。每个 vhost 本质上就是一个 mini 版的 RabbitMQ 服务器，拥有自己的队列、交换器、绑定和权限机制。vhost 是 AMQP 概念的基础，必须在连接时指定，RabbitMQ 默认的 vhost 是 / 。

• 连接RabbitMQ，必须指定虚拟主机。

Broker

表示消息队列服务器实体；Message broker 消息代理（服务器）。

• 交互：消息的发布者，将消息发给消息代理（服务器）中的一个虚拟主机vhost，vhost里面有交换器和队列，vhost将消息发给指定的交换器，交换器再根据消息的路由键routing-key，判断把消息路由到哪个消息队列去，其中的路由规则通过Binding绑定关系来表示。当消息到达消息队列，消费者就可以从消息队列中取出消息，消费者跟消息队列建立起连接，为了节省资源，在每一条TCP连接开辟多个信道，数据通过信道传输给消费者。

 

四、RabbitMQ核心运行机制

1、AMQP 中的消息路由 -- 一个消息如何从生产者到达消费者

（1）生产者生产了一个消息，先将消息发送给Broker消息代理（服务器），服务器中有非常多的交换器和消息队列；服务器收到消息以后，把消息交到一个合适的交换器，交换器根据消息携带的路由键来判断交给哪个消息队列，交换器是跟消息队列进行绑定的；消费者可以连接队列，取出相应的消息。

（2）核心是交换器和绑定器，影响派发的消息结果。

2、Exchange 类型

（1）direct -- 直连交换器

消息中的路由键（routing key）如果和 Binding 中的 binding key 一致， 交换器就将消息发到对应的队列中。路由键与队列名完全匹配，如果一个队列绑定到交换机要求路由键为“dog”，则只转发 routing key 标记为“dog”的消息，不会转发“dog.puppy”，也不会转发“dog.guard”等等。

它是完全匹配、单播的模式。点对点通信模型。

（2）fanout

每个发到 fanout 类型交换器的消息都会分到所有绑定的队列上去。fanout 交换器不处理路由键，只是简单的将队列绑定到交换器上，每个发送到交换器的消息都会被转发到与该交换器绑定的所有队列上。很像子网广播，每台子网内的主机都获得了一份复制的消息。fanout 类型转发消息是最快的。

广播模式。

（3）topic

topic 交换器通过模式匹配分配消息的路由键属性，将路由键和某个模式进行匹配，此时队列需要绑定到一个模式上。它将路由键和绑定键的字符串切分成单词，这些单词之间用点隔开。它同样也会识别两个通配符：符号“#”和符号“*”。#匹配0个或多个单词，*匹配一个单词。

 

 

五、RabbitMQ整合

1、使用Docker安装RabbitMQ

rabbitmq:3-management 带有管理界面

 

[root@hadoop101 ~]# docker pull rabbitmq:3-management
3-management: Pulling from library/rabbitmq
23884877105a: Pull complete 
bc38caa0f5b9: Pull complete 
2910811b6c42: Pull complete 
36505266dcc6: Pull complete 
15c38f93e1dd: Pull complete 
160ce6f9b6ab: Pull complete 
bea03dbbcbee: Pull complete 
518863ae2330: Pull complete 
7d30148aca81: Pull complete 
4383d40ea264: Pull complete 
69e2730d6143: Pull complete 
669cf5de5f0c: Pull complete 
Digest: sha256:ff9ba5c07cad0c2f0eada86e25fac023a97c8d1274a61e0215d6f8b350d6fc38
Status: Downloaded newer image for rabbitmq:3-management
docker.io/library/rabbitmq:3-management

 

2、运行镜像

-p 5672:5672  是将主机的5672端口映射到docker容器的5672，这是客户端和rabbitmq通信的端口；

-p 15672:1562 是rabbitmq管理界面，访问web的端口

[root@hadoop101 ~]# docker run -d -p 5672:5672  -p 15672:15672 --name=myrabbitmq cc86ffa2f398
65d47635b07dc2d2c2e3f2b228583fc60a542e1345fb07e2d813d6a0a6b2ede9
[root@hadoop101 ~]# docker ps
CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS              PORTS                                                                                        NAMES
65d47635b07d        cc86ffa2f398        "docker-entrypoint.s…"   8 seconds ago       Up 6 seconds        4369/tcp, 5671/tcp, 0.0.0.0:5672->5672/tcp, 15671/tcp, 25672/tcp, 0.0.0.0:15672->15672/tcp   myrabbitmq

 

3、登录rabbitmq管理界面

guest/guest