RabbitMQ重复消费如何解决

RabbitMQ重复消费如何解决

MQ消息为什么重复

网络不可达造成消息重复。只要通过网络交换数据，就无法避免这个问题。

AMQP 消费者确认机制

AMQP 定义了消费者确认机制（message ack），如果一个消费者应用B崩溃掉（此时连接会断掉），但是 broker 尚未获得 ACK（6.ACK确认），那么消息会被重新放入队列。所以 AMQP 提供的是“至少一次交付”（at-least-once delivery），异常情况下，消息会被重复消费，此时业务要实现幂等性（重复消息处理）。

重复消息如何处理?

1.消费端处理消息的业务逻辑保持幂等性。

2.保证每条消息都有唯一编号且保证消息处理成功与去重表的日志同时出现。

第 1 条很好理解，只要保持幂等性，不管来多少条重复消息，最后处理的结果都一样。第 2 条原理就是利用一张日志表来记录已经处理成功的消息的 ID，如果新到的消息 ID 已经在日志表中，那么就不再处理这条消息。
第 1 条解决方案，很明显应该在消费端实现，不属于消息系统要实现的功能。第 2 条可以消息系统实现，也可以业务端实现。正常情况下出现重复消息的概率其实很小，如果由消息系统来实现的话，肯定会对消息系统的吞吐量和高可用有影响，所以最好还是由业务端自己处理消息重复的问题，这也是 RabbitMQ 不解决消息重复的问题的原因。

代码示例：

    if(redisTemplate.opsForValue().setIfAbsent(messageId, messageId, expireTime,
        TimeUnit.SECONDS)){
        exeBizCode();
}