如何保证消息不丢失:
-
同步刷盘机制:RocketMQ 支持同步刷盘,即在消息写入磁盘之前,会等待数据写入磁盘完成后再返回成功。这样可以保证消息在发送时已经持久化到磁盘上,避免了因为写入失败而导致消息丢失的问题。
-
异步复制机制:RocketMQ 使用主从架构,支持消息的异步复制。消息首先发送到主节点,主节点将消息写入磁盘后,异步地将消息复制到从节点。即使主节点发生故障,消息仍然可以从从节点获取,保证了消息的高可用性和不丢失性。
-
高可用部署:通过将 RocketMQ 部署在多个节点上,可以实现高可用性。如果某个节点发生故障,消息仍然可以通过其他节点进行处理,避免了单点故障导致的消息丢失问题。
如何保证消息不重复消费:
消息在被消费后,会给rocketmq发送一个ack确认消费成功,如果因为网络问题导致消费成功却没有收到消息,mq就会重新发送这条消息,这个时候就会导致重复消费。所以在消费的时候需要实现幂等性校验。对于查询、删除、更新操作可以不做,因为重复消费对结果没有影响,对于新增,或者跟新操作中添加某个数据必须要实现幂等性校验。给消息一个唯一标识保存到数据库中,在消费前检查这条消息是否消费。