记一次rocketmq事务消息使用不当造成线上事故

最新推荐文章于 2024-01-08 08:00:00 发布

面朝大海春暖花开～

最新推荐文章于 2024-01-08 08:00:00 发布

阅读量890

点赞数 1

分类专栏：线上事故分析

本文链接：https://blog.csdn.net/promisessh/article/details/115182426

版权

RocketMQ 事务消息本地事务回查机制生产者groupId

关键词由CSDN通过智能技术生成

场景：

最近rocketmq事务消息使用不当导致了线上问题；现象为本地事务执行失败，但是半消息还被发送出去了，最终导致了数据不一致；

rocketmq事务消息执行步骤：

在这里插入图片描述

事故还原：

发送半消息及执行本地事务
在这里插入图片描述

问题1：本地事务执行异常后，没有被下面的catch抓住
问题2：按理来说，本地事务执行失败后，rocketMq服务器应该调用客户端回查事务状态的接口，结果没有回查
问题3：半消息最后被roeketMq发送出去了

事故分析：

我们来跟踪下rocket客户端的源码；

@Override
    public SendResult send(final Message message, final LocalTransactionExecuter executer, Object arg) {
   
        this.checkONSProducerServiceState(this.transactionMQProducer.getDefaultMQProducerImpl());
        com.aliyun.openservices.shade.com.alibaba.rocketmq.common.message.Message msgRMQ = ONSUtil.msgConvert(message);
        com.aliyun.openservices.shade.com.alibaba.rocketmq.client.producer.TransactionSendResult sendResultRMQ = null;
        try {
   
        // 发送半消息
            sendResultRMQ = transactionMQProducer.sendMessageInTransaction(msgRMQ,
                new com.aliyun.openservices.shade.com.alibaba.rocketmq.client.producer.LocalTransactionExecuter() {
   
                    @Override
                    public LocalTransactionState executeLocalTransactionBranch(
                        com.aliyun.openservices.shade.com.alibaba.rocketmq.common.message.Message msg,
                        Object arg) {
   
                        String msgId = msg.getProperty(Constants.TRANSACTION_ID);
                        message.setMsgID(msgId);
                        TransactionStatus transactionStatus = executer.execute(message, arg);
                        if (TransactionStatus.CommitTransaction == transactionStatus)