消息队列-RabbitMQ学习笔记（二）

1. 消息队列的优点（作用）

主要有三大优点：解耦、异步、削峰填谷

解耦

如上面快递柜的例子，生产者不用关心你的消费者要不要消费、什么时候消费，我只需要把东西给消息队列，我的工作就算完成了。 生产者和消费者实现了解耦，互不影响。

异步

所谓异步，就是类比快递员（生产者）把你快递（消息）放入快递柜（消息队列）后可以去处理其他快递，无需等待取件人（消费者）取快递（处理消息）。这样生产者就无需等待消费者接收消息就能进行下一步操作，避免了阻塞，就能降低响应时间。这就与异步化处理非常类似，消息队列使系统具备了这种能力。

削峰填谷

消息队列用来削峰填谷，例如秒杀系统，平时流量很低，但是到秒杀的时刻，流量疯狂怼进来，我们的系统可能会因为来不及处理这么多的请求就会过载宕机了。我们可以把请求放入消息队列中，按恒定的速率交给服务器处理请求，就能抗住短时间的大流量了。虽然线程池也能实现削峰填谷的效果，但它并没有消息队列这样的存储灵活性，或者说，消息队列能实现的持久化存储。

优点总结

解耦：消费者要不要消费、什么时候消费，我只需要把东西给消息队列，我的工作就算完成了。 生产者和消费者实现了解耦，互不影响。

异步处理：一旦生产者发送完消息，便可以立即转向其他任务，而消费者则可以在任何时候开始处理消息。这样一来，生产者和消费者之间就不会发生阻塞。

削峰填谷：消息队列允许我们先将用户请求存储起来，然后消费者(或说实际执行任务的应用)可以根据自身的处理能力和需求，逐步从队列中取出并处理请求。

2. 消息队列的缺点

可用性降低

如果消息队列服务本身出现故障，系统中依赖消息队列的部分将会失效，影响系统的可用性。 在高流量下，消息队列可能会被大量消息填满，导致消息处理延迟或服务崩溃。

举例: 在一个金融交易系统中，交易信息通过消息队列进行分发。如果消息队列出现故障，如宕机或磁盘故障，未处理的交易信息可能会丢失，导致系统部分交易记录丢失。为防止这种情况，系统必须配置多节点的消息队列集群并使用持久化存储，但这也提高了系统的复杂性和运维难度。

复杂性提高

使用消息队列会增加系统的技术栈，包括消息队列的安装、配置、集成和监控。系统中需要增加与消息队列的接口代码，包括生产者、消费者的实现、消息的序列化和反序列化、错误处理、消息重试机制等。怎么保证消息没有重复消费？怎么处理消息丢失的情况？怎么保证消息传递的顺序性？

使用Spring AMQP简化与RabbitMQ的集成，通过Kubernetes管理RabbitMQ集群，并使用Prometheus监控其性能和健康状况，减少手动管理的复杂性。

一致性问题

消息可能会在传输过程中丢失，或者消费者因网络故障等原因重复消费消息，导致数据不一致。

举例: 假设你在构建一个电商系统，当用户完成支付后，系统会生成一个订单并发送到消息队列中供库存系统处理。如果消息在传输过程中丢失，库存系统就不会减库存，从而导致实际库存与系统记录的不一致。为了避免这种情况，可能需要引入幂等处理，即库存系统需要设计成即使重复接收相同的消息，也不会导致错误的库存扣减。

3. 消息队列的应用场景

消息队列在实际应用中常用的使用场景：异步处理，应用解耦，流量削锋等场景。

异步处理

场景说明：用户注册后，需要发注册邮件和注册短信。传统的做法有两种：串行的方式和并行方式。

串行方式：将注册信息写入数据库成功后，发送注册邮件，再发送注册短信。以上三个任务全部完成后，返回给客户。

并行方式：将注册信息写入数据库成功后，发送注册邮件的同时，发送注册短信。以上三个任务完成后，返回给客户端。与串行的差别是，并行的方式可以提高处理的时间。

假设三个业务节点每个使用50毫秒钟，不考虑网络等其他开销，则串行方式的时间是150毫秒，并行的时间可能是100毫秒。 因为CPU在单位时间内处理的请求数是一定的，假设CPU1秒内吞吐量是100次。则串行方式1秒内CPU可处理的请求量是7次（1000/150）。并行方式处理的请求量是10次（1000/100）。

小结：如以上案例描述，传统的方式系统的性能（并发量，吞吐量，响应时间）会有瓶颈。如何解决这个问题呢？ 引入消息队列，将不是必须的业务逻辑，异步处理。改造后的架构如下：

按照以上约定，用户的响应时间相当于是注册信息写入数据库的时间，也就是50毫秒。注册邮件，发送短信写入消息队列后，直接返回，因此写入消息队列的速度很快，基本可以忽略，因此用户的响应时间可能是50毫秒。因此架构改变后，系统的吞吐量提高到每秒20QPS。比串行提高了3倍，比并行提高了两倍！

应用解耦

场景说明：用户下单后，订单系统需要通知库存系统。传统的做法是，订单系统调用库存系统的接口。如下图：

传统模式的缺点： 假如库存系统无法访问，则订单减库存将失败，从而导致订单失败，订单系统与库存系统耦合。 如何解决以上问题呢？引入应用消息队列后的方案，如下图：

订单系统：用户下单后，订单系统完成持久化处理，将消息写入消息队列，返回用户订单下单成功。

库存系统：订阅下单的消息，采用拉/推的方式，获取下单信息，库存系统根据下单信息，进行库存操作

假如：在下单时库存系统不能正常使用。也不影响正常下单，因为下单后，订单系统写入消息队列就不再关心其他的后续操作了。实现订单系统与库存系统的应用解耦。

流量削锋

流量削锋也是消息队列中的常用场景，一般在秒杀或团抢活动中使用广泛！

应用场景：秒杀活动，一般会因为流量过大，导致流量暴增，应用挂掉。为解决这个问题，一般需要在应用前端加入消息队列。 可以控制活动的人数，可以缓解短时间内高流量压垮应用。

用户的请求，服务器接收后，首先写入消息队列。假如消息队列长度超过最大数量，则直接抛弃用户请求或跳转到错误页面。 秒杀业务根据消息队列中的请求信息，再做后续处理。