MQ顺序消费解决方案

一、MQ的顺序问题

1.顺序错乱的常见原因 ：

消息发送：多线程并行发送，有顺序的消息被写入到不同的分区，异常重试。 

消息消费：多消费者并行消费，或消费者内部启用多线程消费。异常重试。 

2.为什么要保证消息的顺序 ：

如果业务上通过消息发送的数据是有前后顺序关系时，则必须保证消息的顺序。 

例如：通过MQ同步数据时，如果增、改、删的顺序在同步时变为删、改、增，数据将不被删除。 

二、常见解决方案 

 

三、解决方案 

1、RocketMQ的顺序消息

1.RocketMQ中的顺序消息分为：全局顺序消息和分区顺序消息。 

2.全局顺序消息：所有消息存在同一个topic的同一个分区下，消费时同一时刻只有一个消费者消费。 

3.分区顺序消息：消息按分片键拆分到不同分区上，消费时，同一分区，同一时刻只有一个消费者。

 

2、利用版本号保证顺序

1.消息的顺序需要选定一个分组键，消息的顺序基于此分组键来进行分组排序。 

2.消息发送时，附加上消息的版本号或顺序号。

3.消息消费时，查询消息所在分组当前的版本号，并与当前消息的版本号比对。 

4.如果当前消息的版本号<=分组的版本号，则丢弃此消息。否则消费此消息。 

5.消息消费成功，更新分组的当前版本号。

3、自研分区顺序消费

1.通过ZK协调生产者与消费者。 

2.生产者在启动时，将队列的分片信息注册到zk上发送消息时按分片键将消息拆分到不同队列上。 

3.生产者发送消息时，根据分片键，将消息发送到不同的队列上。 

4.消费者启动时从zk拉取队列分片信息，选择无消费者的分片进行监听，并将监听状态注册到zk上。