面试几个问题总结

如何保证MQ高可用

RabbitMQ 高可用性保证：

镜像队列（Mirrored Queues）

• 镜像集群模式：这是RabbitMQ中最常用的实现高可用的方式。在一个镜像队列中，同一队列会被复制到多个节点上，形成一个镜像队列集合。当其中一个节点故障时，其他拥有相同队列镜像的节点可以继续提供服务。消息会在集群内的所有镜像之间保持同步，从而确保任何节点的失效都不会导致消息丢失。

节点集群

• 普通集群：虽然不能直接保证队列高可用，但可以通过在多台机器上部署节点，分散负载和提供冗余，但每个队列的数据仅存在于一个节点上，需要结合镜像队列来实现真正的高可用。

Kafka 高可用性保证：

分布式集群

• 分区与副本：Kafka的主题被划分为多个分区，每个分区都有多个副本分布在不同的broker节点上。其中有一个为主副本（leader），其余为跟随副本（followers）。生产者将消息发送到主副本，跟随副本异步从主副本复制消息。当主副本所在的broker节点失效时，集群会自动选举新的主副本，从而保证消息服务连续性。

ZooKeeper

• Kafka依赖ZooKeeper来进行集群协调和管理，确保整个系统的稳定性。

RocketMQ 高可用性保证：

主从架构与双写

• 主从复制：RocketMQ采用了主从模式，每个主题下的队列可以在不同的Broker节点上有主从关系，主节点处理读写操作，从节点异步复制消息，当主节点故障时，从节点可以提升为主节点继续提供服务。

NameServer集群

• RocketMQ的NameServer负责维护Broker集群的元数据，它本身也需要构建集群以提高可用性。

总结通用策略：

• 集群部署：无论是哪种MQ，基本思路都是通过集群部署，让多个节点协同工作，共同承担消息的生产和消费任务。
• 数据复制：通过主从复制、分区复制等方式，确保消息在多个节点间同步，任何一个节点失效，其它节点仍持有完整的数据。
• 故障转移：当某个节点失效时，需要具备自动检测和快速切换的能力，确保服务无缝恢复。
• 监控与运维：实施全面的监控，及时发现和处理故障节点，确保系统健康运行。

根据具体的MQ产品特性和业务需求，选择合适的高可用策略和配置参数，结合自动化运维工具和流程，是搭建高可用MQ服务的关键。

如何保证消息顺序性

消息顺序性的保证在分布式消息队列系统中是一个重要议题，特别是在金融交易、日志处理、事务处理等领域，要求消息严格按照发送顺序进行消费。以下是几种消息队列（如RabbitMQ、Kafka、RocketMQ）保障消息顺序性的策略：

RabbitMQ 保证消息顺序性：

1. 单个队列顺序消费：在同一队列中，RabbitMQ会按照消息到达的顺序进行存储，消费者也会按此顺序消费。若要保证顺序，应确保所有的生产者都向同一个队列发送消息，并且只有一个消费者（或消费者组中的一个消费者实例）消费这个队列的消息。
2. Direct交换器：使用Direct交换器可以直接将消息路由至指定队列，配合单队列消费，可以有效保证消息顺序。

Kafka 保证消息顺序性：

1. 分区顺序：Kafka的消息在同一个分区内部是有顺序的。创建主题时，可以设定足够的分区数量，并确保生产者将具有顺序关系的消息始终发送到同一个分区，这样同一分区内的消费者将按照消息的生成顺序进行消费。
2. 有序生产者：在Kafka生产者端设置partitioner.class属性，自定义分区分配策略，确保具有顺序关系的消息进入同一个分区。

RocketMQ 保证消息顺序性：

1. 消息顺序消费：RocketMQ提供了顺序消息功能，通过MessageQueue的顺序投递和消费，可以实现严格的消息顺序。生产者需要将具有顺序要求的消息发送到同一个MessageQueue，并在消费端设置为顺序消费模式。
2. Topic和Tag：利用Topic和Tag机制，将具有顺序性的消息标记为相同的Tag，然后在消费端确保同Tag的消息只被一个消费者消费，即可达到顺序消费的目的。

共享策略：

• 控制并发度：降低并发度，确保某一时间点只有一个生产者或消费者在处理某一分区或队列的消息。
• 幂等处理：消息队列和消费者的处理逻辑需要具备幂等性，防止因为重试等因素导致消息顺序混乱。

总的来说，保证消息顺序性需要综合考虑消息队列的设计、生产和消费端的编程策略以及具体业务场景的需求。同时，也要注意到在追求高吞吐量、高并发的情况下，严格的消息顺序可能会牺牲一定的性能和扩展性。

如何保证消息不重复消费

消息不重复消费是消息队列系统设计中的另一个关键问题，通常采用以下几种方法来保证：