Stream进阶篇-消息分区实现验证&源码简析

前言

在《消费组实现验证》章节，已经介绍了如何通过消费组避免单个消息被多个实例重复消费。但还有一些场景需要满足，同一个特征的数据被同一个实例消费，比如同一个id的传感器监测数据必须被同一个实例统计计算分析，否则可能无法获取全部的数据。又比如部分异步任务，首次请求启动task，二次请求取消task，此场景就必须保证两次请求至同一实例。本章将介绍如何通过消息分区实现上述场景应用。

本章概要

1、消费者Receiver工程改造；

2、生产者Sender工程改造；

3、消息分区验证；

4、自定义消息分区策略；

消费者Receiver工程改造

1、在MySink中添加分区测试通道 partition-channel：

package com.cloud.shf.stream.sink;
public interface MySink {
    /*********************************分区示例通道******************************/
    String PARTITION_CHANNEL = "partition-channel";

    @Input(PARTITION_CHANNEL)
    SubscribableChannel partitionInput();
}

2、添加对 partition-channel通道的监听，如下打印接收到的用户age信息：

/********************************分区示例******************************/
@StreamListener(value = MySink.PARTITION_CHANNEL)
public void partitionReceiver(@Payload User user) {
    LOGGER.info("Received-{} from {} channel age: {}", active, MySink.PARTITION_CHANNEL, user.getAge());
}

3、在 application.properties中添加如下配置：

spring.cloud.stream.bindings.partition-channel.group=receiver-partition
spring.cloud.stream.bindings.partition-channel.consumer.partitioned=true
spring.cloud.stream.instanceCount=4

NOTE：

• 分区特性建立在消费组的基础上，故必须配置spring.cloud.stream.bindings.partition-channel.group属性；
• spring.cloud.stream.bindings.partition-channel.consumer.partitioned配置是否启用分区；
• 本次累计共启动4个实例，故定义spring.cloud.stream.instanceCount为4

4、步骤3中的配置为通用型配置，下面将对每个通过profile启动的实例添加配置：

• application-1.properties配置如下：

spring.cloud.stream.instanceIndex = 0