MQ-interview

最新推荐文章于 2024-04-27 11:36:07 发布

yannischen

最新推荐文章于 2024-04-27 11:36:07 发布

阅读量1k

点赞数

文章标签：分布式 MQ

本文链接：https://blog.csdn.net/piggachen/article/details/123061768

版权

MQ面试问题整理

解耦

同一块业务的相关能力被很多个项目需要，后续也有极大可能会被其他项目需要。将该部分能力解耦，通过MQ进行消息的统一处理。若有其他项目或业务需要相关功能，则对此进行订阅，处理相关业务。减少项目直接依赖。
异步

大型项目相关协作人员，参与团队越来越多，项目之间的关联越来越深。造成整个链路特别长，且问题排查不容易。
削峰

对于部分业务，在某些时间点，可能因为瞬时请求过大，造成所有请求直接访问至数据库对数据库造成压力，从而影响项目原有业务。一般MySQL数据库的处理能力在2k次/s，MQ的高峰处理能力1w+。能有效的处理

由于新增加了MQ，因为MQ的可用性、可靠性会造成系统可用性的额外负担。

RocketMQ

单master模式，一旦出现问题，就会整个服务不可用。一般不会直接生产使用，适合个人学习；
多master模式，多个master节点组成集群。单个master出现问题不影响。优点：所有模式中性能最高的。缺点：单个master节点宕机期间，未被消费的消息在节点恢复之前不可用，消息实时性就受到影响。注意：使用同步刷盘可保证消息不丢失，同时topic相对应的queue应该分布在集权中各个master节点，而不是只在某一个master节点上；
多master多slave异步复制模式，在多master模式下，每个master节点至少都有一个对应的slave;

master节点可读可写，slave只可读不可写。优点：在master宕机时，消费者可以直接从slave读取消息，消息实时性不会受到影响，性能几乎与多master一样。缺点：使用异步复制可能造成消息丢失问题。
多master多slave同步双写，同上一种模式类似，区别在于master与slave之间的数据同步方式。优点：同步双写的同步模式能保证数据不丢失。缺点：发送单个消息时长会比较长，性能会比较差；
同步刷盘，异步刷盘的区别：在于多master之间的数据同步写入磁盘模式。

	同步复制	异步复制
概念	即等 Master 和 Slave 均写成功后才反馈给客户端写成功状态	只要 Master 写成功，就反馈客户端写成功状态
可靠性	可靠性高，若 Master 出现故障，Slave 上有全部的备份数据，容易恢复	若 Master 出现故障，可能存在一些数据还没来得及写入 Slave，可能会丢失
效率	由于是同步复制，会增加数据写入延迟，降低系统吞吐量	由于只要写入 Master 即可，故数据写入延迟较低，吞吐量较高

实际应用中的推荐把Master和Slave设置成ASYNC_FLUSH的异步刷盘方式，主从之间配置成SYNC_MASTER的同步复制方式，这样即使有一台机器出故障，仍然可以保证数据不丢。

可靠性问题如何解决

引入MQ造成的数据可靠性问题，或者如何处理消息丢失问题？整个MQ的链路中，可能存在消息丢失的位置仅有三个，一个是生产端，一个是MQ自身，最后一个就是下游的消费者。

不同的MQ对此解决方案均不一样，需分别分析。

ActiveMQ
生产端
程序在每次发往MQ的消息后，可接收到MQ对其的Ack响应，

增加了MQ，引入了消息是否会重复消费，消息丢失问题。

引入MQ之后，单一事务会被分拆为多个事务。引入了分布式事务一致性的问题。

关注