文章目录
十三、SpringBoot与消息
1、概述
1、大多应用中,可通过消息服务中间件来提升系统异步通信、扩展解耦能力
2、消息服务中两个重要概念:消息代理(message broker)和目的地(destination)
当消息发送者发送消息以后,将由消息代理接管,消息代理保证消息传递到指定目的地。
3、消息队列主要有两种形式的目的地
队列(queue):点对点消息通信(point-to-point)
主题(topic):发布(publish)/订阅(subscribe)消息通信
- 异步处理
- 应用解耦
- 流量削峰
4、点对点式:
消息发送者发送消息,消息代理将其放入一个队列中,消息接收者从队列中获取消息内容,消息读取后被移出队列
消息只有唯一的发送者和接受者,但并不是说只能有一个接收者
5、发布订阅式:
发送者(发布者)发送消息到主题,多个接收者(订阅者)监听(订阅)这个主题,那么就会在消息到达时同时收到消息
6、JMS(Java Message Service)JAVA消息服务:
基于JVM消息代理的规范。ActiveMQ、HornetMQ是JMS实现
7、AMQP(Advanced Message Queuing Protocol)
高级消息队列协议,也是一个消息代理的规范,兼容JMS
RabbitMQ是AMQP的实现
2、RabbitMQ
<1>、简介
- RabbitMQ是一个由erlang开发的AMQP(Advanved Message Queue Protocol)的开源实现。
- Message:
消息,消息是不具名的,它由消息头和消息体组成。消息体是不透明的,而消息头则由一系列的可选属性组成,这些属性包括routing-key(路由键)、priority(相对于其他消息的优先权)、delivery-mode(指出该消息可能需要持久性存储)等。 - Publisher
消息的生产者,也是一个向交换器发布消息的客户端应用程序。 - Exchange
交换器,用来接收生产者发送的消息并将这些消息路由给服务器中的队列。
Exchange有四种类型:direct(默认)、fanout,topic,headers,不同类型的Exchange转发消息的策略有区别。 - Queue
消息队列,用来保存消息直到发送给消费者。是消息的容器,也是消息的终点。一个消息可投入一个或多个队列。消息一直在队列里面,等待消费之连接到这个队列将其取走。 - Binding
绑定,用于消息队列和交换器之间的关联。一个绑定就是基于路由键将交换器和消息队列连接起来的路由规则,所以可以将交换器理解成一个由绑定构成的路由表。
Exchange和Queue的绑定可以是多对多的关系。 - Connection
网络连接,比如一个TCP连接。 - Channel
信道,多路复用连接中的一条独立的双向数据通道。信道是建立在真实的TCP连接内的虚拟连接,AMQP命令都是通过信道发送出去的,不管是发布消息、订阅队列还是接收消息,这些动作都是通过信道完成的。因为对于操作系统来说建立和销毁TCP都是非常昂贵的开销,所以引入了信道的概念,达到复用一条TCP连接。 - Consumer
消息的消费者,表示一个从消息队里中取得消息的客户端应用程序。 - Virtual Host
虚拟主机,表示一批交换器、消息对立和相关对象。虚拟主机是共享相同的身份认证和加密环境的独立服务器域。每个vhost本质上就是一个mini版的RabbitMQ服务器,拥有自己的队列、交互器、绑定和权限机制。vhost是AMQP概念的基础,必须在连接时指定,RabbitMQ默认的vhost是/ - Broker
表示消息队列服务器实体
消息生产者Publisher将消息发布到消息代理服务器Broker上,然后进入到Virtual Host虚拟主机内部,虚拟主机内有交换机Exchange和队列Queue,然后消息进来之后,到达制定的交换器,然后根据消息的路由键,判断到底要把该消息送入哪个消息队列中(路由规则就是由绑定关系Binding决定的),进入消息队列Queue之后与消费者Consumer进行联系,连接成功之后,为了节省资源多路复用,在一条TCP协议中开设很多条Channel进行多路复用,进行数据交互,将信息传递给Consumer。
<2>、运行机制
(1)、AMQP中的消息路由
AMQP 中消息的路由过程和 Java 开发者熟悉的 JMS 存在一些差别,AMQP 中增加了 Exchange 和 Binding 的角色。生产者把消息发布到 Exchange 上,消息最终到达队列并被消费者接收,而 Binding 决定交换器的消息应该发送到那个队列。
(2)、Exchange
Exchange分发消息时根据类型的不同分发策略有区别,目前共四种类型:direct、fanout、topic、headers 。headers 匹配 AMQP 消息的 header 而不是路由键, headers 交换器和 direct 交换器完全一致,但性能差很多,目前几乎用不到了,所以直接看另外三种类型:
消息中的路由键(routing key)如果和 Binding 中的 binding key 一致, 交换器就将消息发到对应的队列中。路由键与队列名完全匹配,如果一个队列绑定到交换机要求路由键为“dog”,则只转发 routing key 标记为“dog”的消息,不会转发“dog.puppy”,也不会转发“dog.guard”等等。它是完全匹配、单播的模式。
每个发到 fanout 类型交换器的消息都会分到所有绑定的队列上去。fanout 交换器不处理路由键,只是简单的将队列绑定到交换器上,每个发送到交换器的消息都会被转发到与该交换器绑定的所有队列上。很像子网广播,每台子网内的主机都获得了一份复制的消息。fanout 类型转发消息是最快的。
topic 交换器通过模式匹配分配消息的路由键属性,将路由键和某个模式进行匹配,此时队列需要绑定到一个模式上。它将路由键和绑定键的字符串切分成单词,这些单词之间用点隔开。它同样也会识别两个通配符:符号“#”和符号“*”。#匹配0个或多个单词,*匹配一个单词。
<3>、使用RabbitMQ
(1)、搭建RabbitMQ的环境
[root@localhost hadoop1]# docker pull docker.io/rabbitmq:3-management
不要下载latest的 ,因为latest的TAG版本没有微博界面,要使用上面的3-management
(2)、创建Exchange交换机
为了测试三种交换机(direct fanout topic)不同的功能,所以手动在exchange模块创建交换机
Direct
Durability:持久化设置。如果选择Durable,重启rabbitMQ之后此交换器还在,如果选择Transient,重启rabbitMQ之后交换器就不在了,其他的如图设置,点击创建交换机。
Fanout
Topic
(3)、创建Queue消息队列
创建完消息队列是不起作用的,要和交换机进行关联。
(4)、关联
(5)、测试
模拟发送消息:
随机编辑消息,指定路由键
回到消息队列,显示消息发送成功
刚才发送的是direct,完全匹配路由键去发送,现在发送fanout交换机
fanout就是不管路由键是怎么写的,给每一个队列都发送消息
然后试试topic,而topic就是根据匹配规则来发送信息。可以自己尝试测验一下
<4>、整合RabbitMQ
(1)、创建符合实验环境的工程
(2)、配置RabbitMQ
在application.properties中完成RabbitMQ的相关配置
spring.rabbitmq.host=192.168.3.158
spring.rabbitmq.username=guest
spring.rabbitmq.password=guest
(3)、进行direct交换机的测试
/**
* 单播
*/
@Test
public void contextLoads() {
//Message需要自己构造一个;定义消息体内容和消息头
//rabbitTemplate.send(exchange,routeKey,message)
//object默认当成消息体,只需要传入要发送的对象,自动序列化发送给rabbitmq
//rabbitTemplate.convertAndSend(exchange,routeKey,message)
Map<String, Object> map = new HashMap<>();
map.put("msg", "消息来了");
map.put("data", Arrays.asList("HelloWorld", 1234));
//对象被默认序列化以后发送出去
rabbitTemplate.convertAndSend("exchange.direct", "atguigu.news", map);
}
点进Queue对应的routeKey之后来看get Message具体查看我们收到的消息
发现都是一些序列化的乱码,为了弄清楚我们是否将消息发送对了,我们先把它打印在控制台上,最终显示是没有问题的。
我们现在要实现接收到消息,就在下面继续写一个测试类,获取到接收的数据类型和数据本身。
@Test
public void receive(){
Object o = rabbitTemplate.receiveAndConvert("atguigu.news");
System.out.println(o.getClass());
System.out.println(o);
}
数据成功接收到。
但是如何将数据以自动转换为json格式发送出去,而不是写成一个序列化的字节数组打印出来,所以需要自己写一个配置类去完成
@Configuration
public class MyAMQPConfig {
@Bean
public MessageConverter messageConverter(){
return new Jackson2JsonMessageConverter();
}
}
重新运行一下,然后再次来到RabbitMq的Web界面,观察到成功转换成json格式了。
现在要实现,自己书写一个类传入自定义的数据,以json的形式显示在RabbitMQ上
public class Book {
private String bookName;
private String author;
public Book() {
}
public Book(String bookName, String author) {
this.bookName = bookName;
this.author = author;
}
public String getBookName() {
return bookName;
}
public void setBookName(String bookName) {
this.bookName = bookName;
}
public String getAuthor() {
return author;
}
public void setAuthor(String author) {
this.author = author;
}
}
重新传入参数,查看页面消息
显示成功。
(4)、进行fanout交换机的测试
写测试类,将message发送到fanout交换机,然后运行
/**
* 广播
*/
@Test
public void sendMsg(){
rabbitTemplate.convertAndSend("exchange.fanout", "", new Book("西游记", "吴承恩"));
}
到Web界面,随意访问一个交换机
发现信息已经被传送到队列,广播模式也成功。
(5)、监听消息队列,接收数据
创建一个业务层,编写业务代码,监听指定的消息队列,获取到消息数据
@Service
public class BookService {
@RabbitListener(queues = "atguigu.news")
public void receive(Book book){
System.out.println("收到信息" + book);
}
@RabbitListener(queues = "atguigu")
public void receive02(Message message){
System.out.println(message.getBody());
System.out.println(message.getMessageProperties());
}
}
在控制台成功接收到消息
(6)、AmqpAdmin创建exchange、queue、binding
测试类中写上自动配置
@Autowired
AmqpAdmin amqpAdmin;
创建DirectExchange
@Test
public void createExchange(){
amqpAdmin.declareExchange(new DirectExchange("amqpAdmin.exchange"));
System.out.println("创建?");
到Web页面,观看到我们的队列已经创建成功。
创建topic
amqpAdmin.declareQueue(new Queue("amqpAdmin.queue", true));
将创建的交换机和队列创建绑定规则
在我们自己创建的交换机下观察此时是没有绑定的
amqpAdmin.declareBinding(new Binding("amqpAdmin.queue", Binding.DestinationType.QUEUE,
"amqpAdmin.exchange", "amqp.haha", null));
运行之后,我们可以看到绑定关系出现。