Spring Cloud Stream消息驱动之整合RabbitMQ
1、干什么的?
目前使用的消息中间件MQ太多了(如java使用了RabbitMQ,而后台大数据使用了Kafka),那么有没有一种新的技术来让我们不再关注具体MQ的细节,我们只需要用一种适配绑定的方式,自动的给我们在各种MQ内切换的技术呢?这个就是Spring Cloud Stream技术的诞生。
总的一句话:屏蔽底层消息中间件的差异,降低切换成本,统一消息的编程模型。
官方网站:https://spring.io/projects/spring-cloud-stream
2、什么是SpringCloudStream
它是一个构件消息驱动微服务的框架。
应用程序通过inputs和outputs来与Spring Cloud Stream中的binder对象交互。
通过我们配置来binding(绑定),而Spring Cloud Stream的binder对象与消息中间件交互。
所以,我们只需要高清楚如何与Spring Cloud Stream交互就可以方便使用消息驱动模式。
通过使用Spring Integration来连接消息代理中间件以实现消息时间驱动。
Spring Cloud Stream为一些供应商的消息中间件产品提供了个性化的自动配置实现,引用了发布-订阅、消费组、分区的三个核心概念。
3、实现方式
通过定义绑定器Binder作为中间层,实现了应用程序与消息中间件细节之间的隔离。
Stream中的消息通信方式遵循了发布-订阅模式。
组成 | 说明 |
---|---|
Middleware | 中间件,RabbitMQ/Kafka |
Binder | Binder是应用于消息中间件之间的封装,通过Binder可以很方便的连接中间件,可以动态的改变消息类型(对应于Kafka的topic,RabbitMQ的exchange),这些都可以通过配置文件来实现 |
@Input | 注解标识输入管道,通过该输入管道接收到的消息进入应用程序 |
@Output | 注解标识输出管道,发布的消息将通过该管道离开应用程序 |
@StreamListener | 监听队列,用于消费者的队列的消息接收 |
@EnalbeBinding | 指通道channel和exchange绑定在一起 |
4、消息驱动生产者(基于RabbitMQ)
pom文件添加依赖:
<!--引入stream的RabbitMQ消息驱动-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
yml配置文件:
server:
port: 8801
spring:
application:
name: cloud-stream-provider
cloud:
stream:
binders: #在此处配置要绑定rabbitmq的服务信息
defaultRabbit: #表示定义的名称,用于binding集合
type: rabbit #信息组件类型
environment: #设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: #服务的整合处理
output: #这个名字是一个通道的名称
destination: studyExchange #表示要使用Exchange名称定义(将消息发送到这个Exchange里面)
content-type: application/json #设置消息类型,本次为json,文本则设置“text/plain”
binder: defaultRabbit #设置要绑定的消息服务的具体设置
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka
instance:
lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔(默认是30秒)
lease-expiration-duration-in-seconds: 5 #在此时间内未接受到心跳则移除
instance-id: send-8801.com #在信息列表时显示主机名称
prefer-ip-address: true #访问的路径变成IP地址
接口:
public interface IMessageProvider {
public String send();
}
实现类:
import com.atguigu.springcloud.service.IMessageProvider;
import org.springframework.cloud.stream.annotation.EnableBinding;
import org.springframework.cloud.stream.messaging.Source;
import org.springframework.messaging.MessageChannel;
import org.springframework.messaging.support.MessageBuilder;
import javax.annotation.Resource;
import java.util.UUID;
@EnableBinding(Source.class) //定义消息的推送管道
public class IMessageProviderImpl implements IMessageProvider {
@Resource
private MessageChannel output; //消息发送管道
@Override
public String send() {
String serial = UUID.randomUUID().toString();
output.send(MessageBuilder.withPayload(serial).build());
System.out.println("--------------serial:" + serial);
return null;
}
}
controller层调用:
import com.atguigu.springcloud.service.IMessageProvider;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RestController;
import javax.annotation.Resource;
@RestController
public class SendMessageController {
@Resource
private IMessageProvider messageProvider;
@GetMapping(value = "/sendMessage")
public String sendMessage() {
return messageProvider.send();
}
}
5、消息驱动消费者
pom文件添加依赖:
<!--引入stream的RabbitMQ消息驱动-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
yml配置文件:
server:
port: 8802
spring:
application:
name: cloud-stream-consumer
cloud:
stream:
binders: #在此处配置要绑定rabbitmq的服务信息
defaultRabbit: #表示定义的名称,用于binding集合
type: rabbit #信息组件类型
environment: #设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: #服务的整合处理
input: #这个名字是一个通道的名称
destination: studyExchange #表示要使用Exchange名称定义(将接收这个Exchange的消息)
content-type: application/json #设置消息类型,本次为json,文本则设置“text/plain”
binder: defaultRabbit #设置要绑定的消息服务的具体设置(报红不影响启动!!!)
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka
instance:
lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔(默认是30秒)
lease-expiration-duration-in-seconds: 5 #在此时间内未接受到心跳则移除
instance-id: receive-8802.com #在信息列表时显示主机名称
prefer-ip-address: true #访问的路径变成IP地址
controller层接收:
import org.springframework.beans.factory.annotation.Value;
import org.springframework.cloud.stream.annotation.EnableBinding;
import org.springframework.cloud.stream.annotation.StreamListener;
import org.springframework.cloud.stream.messaging.Sink;
import org.springframework.messaging.Message;
import org.springframework.stereotype.Component;
@Component
@EnableBinding(Sink.class) //开启消息驱动绑定
public class ReceiveMessageListenerController {
@Value("${server.port}")
private String serverPort;
@StreamListener(Sink.INPUT)
public void input(Message<String> message) {
System.out.println("消费者1号,接收的消息为:" + message.getPayload() + "\t" + "port:" + serverPort);
}
}
6、消费者分组
如下案例:
如果一个订单同时被多个服务获取到,那么会造成数据错误。
Stream使用消息分组来解决这个问题。
在Stream中处于同一个group中的多个消费者是竞争关系,就能够保证消息只会被其中一个应用消费,不同组是可以全面消费的(重复消费)。
我们只需要在消息消费者的yml配置文件中添加配置:
7、消息持久化
如果存在多个消息消费者,当其中某个消费者服务崩掉了,这时候消息生产者还在推送消息,如果未配置持久化,那么这个崩溃的服务重启后就不会接收到消息。配置的属性也是group,group是支持持久化的。
即:加了group属性就支持消息的持久化