RabbitMQ消息丢失、积压、重复等解决方案

最新推荐文章于 2024-08-28 20:06:08 发布
最新推荐文章于 2024-08-28 20:06:08 发布
阅读量1.1k 收藏 3
点赞数 1
文章标签： rabbitmq 分布式 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_58683072/article/details/122640458
版权
本文探讨了RabbitMQ中消息丢失的三个原因及其解决策略，包括异常处理、消息持久化和手动ACK。针对消息重复问题，提出了幂等性消费接口和防重表的方法。此外，还分析了消息积压的情况，建议通过增加消费者、批量处理和柔性事务来优化。
摘要由CSDN通过智能技术生成

消息丢失#

1、只要订单完成我们就会发送一条消息给MQ，这个途中突然MQ服务器网络中断，导致消息无法抵达

做好容错方法需要在消息发送前加上异常处理

还可以将消息存入数据库，把失败的消息定期重新再发一遍

2、当消息发送给MQ，通过Brock通过交换机抵达队列，MQ关机了，只有抵达队列才能实现消息持久化

这时候需要使用生产者的确认机制

只要消息收到了会自动持久化，如果进入另一个回调方法说明报错了，需要修改数据库使消息重发

3、自动ACK的状态下。消费者收到消息，但没来得及消息然后宕机

一定开启手动ACK，消费成功才移除，失败或者没来得及处理就noAck并重新入队

消息重复#

1、消息消费成功，事务已经提交，ack时，机器宕机。导致没有ack成功，Broker的消息重新由unack变为ready，并发送给其他消费者

<

最低0.47元/天 解锁文章
码爱爸爸
关注
RabbitMQ消息丢失、消息重复消费、消息顺序性无法保证、消息积压、一致性问题、系统可用性降低等这些常见问题怎么解决
小小鱼儿小小林的博客
04-24 542
MQ（Message Queue，消息队列）是分布式系统中用于实现应用之间的异步通信和消息传递的重要组件。然而，在使用MQ时，可能会遇到一些常见问题，这些问题包括消息丢失、消息重复消费、消息顺序性无法保证等
RabbitMQ(五)消息发送失败后的处理
热门推荐
能写下来,理解才会更深
03-26 3万+
前一篇文章,写了消息发送确认的一些内容. 就是消息发送成功或失败的时候,都会调用confirmListener 或者returnListener. 如果消息发送成功,就不考虑了.当消息发送失败时,怎么处理这个消息呢. 1.自动重发 2.系统预警人工处理等 以上操作,都需要知道是哪条消息,具体什么内容发送失败了,才能进行后续处理. 在returnListener中,参数是有消息内
MQ怎么处理消息积压
weixin_45286894的博客
08-23 471
综上所述，解决消息队列中大量消息堆积的问题需要综合考虑消费者数量、消费者逻辑优化、消息队列容量、消息过期设置、监控报警机制等多个方面，根据具体情况选择合适的解决方案来解决问题。增加消息队列的容量：增加消息队列的容量可以存储更多的消息，缓解消息堆积的压力。设置消息过期时间：对于一些长时间未被消费的消息，可以设置消息的过期时间，使其在一定时间后自动过期并被丢弃，从而避免消息长时间堆积。增加消费者数量：增加消费者数量可以提高消息消费的速度，缩短消息队列中消息的处理时间，从而减少消息堆积的程度。
RabbitMQ 异常与任务分发
weixin_34138056的博客
12-15 125
异常情况处理 上篇最后提到了这个问题， consumer异常退出、queue出错、甚至rabbitMQ崩溃。因为它们都是软件 ，软件都会有bug，这是无法避免的。所以RabbitMQ在设计的时候也想到了这一点 在之前，消息分发给consumer后立即就会被标记为已消费，这时候如果consumber接到了一个消息但是还没有来的及处理就异常退出,那么这个消息的状态是已被消费的，于是就会造成消息丢失的...
rabbitmq消息异常处理
YH950618的博客
09-27 5589
rabbitmq消息异常处理
RabbitMQ常见异常处理（踩了一路坑）
人生就是一个不断学习的过程
03-26 1万+
异常一：方法不匹配异常 Listener method 'no match' threw exception刷屏 2020-03-26 11:00:07.747 [org.springframework.amqp.rabbit.RabbitListenerEndpointContainer#1-1] WARN org.springframework.amqp.rabbit.listener.Co...
RabbitMQ 可靠性、重复消费、顺序性、消息积压解决方案
Cr1556648487的博客
10-17 1277
其实认真研究下来你会发现所谓的消息可靠性本身就是无法保证的......所谓的各种可靠性机制只是为了以后消息丢失提供可查询的日志而已，不过通过这些机制耗费一些（巨大）成本的确是能够缩小消息丢失的可能性。
RabbitMQ消费者异常情况处理方案
点滴记忆，分享成长之路
01-08 6833
RabbitMQ消费者异常情况处理 重试
RabbitMQ（二）：RabbitMQ高级特性
07-21 338
RabbitMQ是目前非常热门的一款消息中间件，不管是互联网大厂还是中小企业都在大量使用。作为一名合格的开发者，有必要了解一下相关知识，RabbitMQ（一）：RabbitMQ快速入门已经入门RabbitMQ，本文介绍RabbitMQ的高级特性。 过期时间（TTL） Time To Live，也就是生存时间，是一条消息在队列中的最大存活时间，单位是毫秒。了解Redis的朋友应该一看就明白...
RabbitMQ 常见问题与故障排查
最新发布
StaticKing的博客
08-28 1626
在使用 RabbitMQ 的过程中，可能会遇到各种问题。以下是对常见问题及其解决方案的详细描述，以及性能问题的排查方法和日志分析技巧。
rabbitmq重复确认导致消息丢失
我的博客
05-11 206
rabbitmq的trace消息跟踪显示乱码
RabbitMQ 笔记
杜莱的博客
09-16 895
文章目录课程介绍课程目的课程主要内容第一部分：消息中间件概述第 1 节 分布式架构通信1.1 分布式架构通信原理1.2 分布式同步通信的问题1.3 分布式异步通信模式第 2 节 消息中间件简介2.1 消息中间件概念2.2 自定义消息中间件2.3 主流消息中间件及选型2.4 消息中间件应用场景第 3 节 JMS 规范和 AMQP 协议3.1 JMS 经典模式详解3.1.1 JMS 消息3.1.2 体系架构3.1.3 对象模型3.1.4 模式3.1.5 传递方式3.1.6 供应商3.2 JMS 在应用集群中的问
rabbitMQ消息发送失败处理策略
penn
03-17 9995
一、发送失败的三种情况： （1）producter连接mq失败，消息没有发送到mq （2）producter连接mq成功，但是发送到exchange失败 （3）消息发送到exchange成功，但是路由到queue失败； 二、处理策略： (1)异常处理：convertAndSend方法加异常并捕获，失败则发送邮件并保存到数据库中 (2)发送失败处理：这种处理需要先设置rabbitTemplate.setMandatory(true);然后分别对confirmCallback和returnCallback
rabbitmq消息ACK确认机制及发送失败处理
古甲哈醒的专栏
07-07 4737
rabbitmq为确保消息发送和接收成功，采用ack机制。 （1）生产者producter发送消息到mq时，mq会发送ack给producter告知消息是否投递成功； （2）消费者consumer接收处理消息后，consumer会发送ack给mq告知消息是否处理成功； 通过ack机制，确保消息能够被producter成功发送和consumer成功接收处理，保证消息不丢失。
RabbitMq——消息积压分析和解决思路
专注写bug
02-28 5101
文章目录前言消息积压产生的原因消息积压问题解决 前言 专栏中之前进行了一系列各种模式的配置、使用和测试操作。但是都只是应用于使用阶段，暂未面向问题解决分析方向。 最近看了一篇资料，有大佬说到了消息积压问题的产生原因等问题。对此做出个人见解说明记录。 好记性不如烂笔头！ 消息积压产生的原因 正常而言，一般的消息从消息产生到消息消费需要经过以下几种阶段。 以Direct模式为例： 消息由生产者产生，比如新订单的创建等，经过交换机，将消息发送至指定的队列中，然后提供给对应的消费者进行消费。 在这个链路中，存
【MQ05】异常消息处理
硬核项目经理
02-26 748
异常消息处理上节课我们已经学习到了消息的持久化和确认相关的内容。但是，光有这些还不行，如果我们的消费者出现问题了，无法确认，或者直接报错产生异常了，这些消息要怎么处理呢？直接丢弃？这就是丢消息了呀。再次处理？一直继续报错怎么办？这条消息就永远都在不停报错的死循环中了。通常，消息队列系统都会提供一套对于异常消息的处理机制，比如 RabbitMQ 的死信队列。RabbitMQ死信队列死信队列，其实就是...
docker运行了rabbitmq，但是在管理台页面的Admin-User的页面，提示报错：SyntaxError: Unexpected token ‘catch‘ SyntaxError:
qq_34963264的博客
05-25 2261
在地址栏中输入 chrome://settings/clearBrowserData 并按下 Enter 键。在 “隐私与安全” 选项卡下，找到 “Cookie 和站点数据” 部分。在 “高级” 选项卡下，选择清除时间范围（建议选择 “全部时间”）。关闭 Firefox 浏览器，然后重新打开，并尝试重新加载页面。在 “隐私、搜索和服务” 选项卡下，选择 “选择要清除的内容”。关闭 Chrome 浏览器，然后重新打开，并尝试重新加载页面。关闭 Edge 浏览器，然后重新打开，并尝试重新加载页面。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值