分布式事务(阿里巴巴RocketMQ实现分布式事务)

1 RokcetMQ是什么?

Apache RocketMQ是一个采用Java语言开发的分布式的消息系统,由阿里巴巴团队开发,与2016年底贡献给Apache,成为了Apache的一个顶级项目。
在阿里内部,RocketMQ 很好地服务了 集 团大大小小上千个应用,在每年的双十一当天,更有不可思议的万亿级消息通过 RocketMQ 流转(在 2017 年的双十一当天,整个阿里巴巴集团通过 RocketMQ 流转的线上消息达到了万亿级,峰值 TPS 达到 5600 万),在阿里大中台策略上发挥着举足轻重的作用 。

2 RocketMQ解决分布式事务

1、A系统发送一个prepared消息到MQ,如果这个prepared消息发送失败那么就直接取消操作别执行了。

2、如果这个消息发送成功了、就接着执行本地事务(executeLocalTransaction),如果成功就告诉MQ发送确认消息,如果失败,就告诉MQ发送回滚消息。

3、如果发送了确认消息、那么B系统会接收到确认消息,然后执行本地事务。

4、上面的第2步, 由于网络原因发送确认or回滚消息失败,但是broker有轮询机制,根据唯一id查询本地事务状态,MQ会自动定时轮询所有prepared消息回调你的接口(checkLocalTransaction),问你,这个消息是不是本地事务处理失败了,所有没有发送确认的消息,是继续重试还是回滚?一般来说这里你就可以查下数据库看之前本地事务是否执行,如果回滚了,那么这里也回滚吧。这个就是避免可能本地事务执行成功了,而确认消息却发送失败了。

PS:此方案是不支持事务发起服务进行回滚的(订单支付成功了,即使短信发送没有执行成功,订单系统也不会回滚),但是大部分互联网应用都不会要求事务发起方进行回滚,如果一定要事务发起方进行回滚应该采用2PC、3PC、TCC等强一致性方案来实现分布式事务,比如LCN。

以一个例子说明,为什么大部分场景不用回滚:

我们去北京庆丰包子铺吃炒肝,先去营业员那里付款(Action1),拿到小票(Ticket),然后去取餐窗口排队拿炒肝(Action2)。思考2个问题:第一,为什么不在付款的同时,给顾客炒肝?如果这样的话,会增加处理时间,使得后面的顾客等待时间变长,相当于降低了接待顾客的能力(降低了系统的QPS)。第二,付了款,拿到的是Ticket,顾客为什么会接受?从心理上说,顾客相信Ticket会兑现炒肝。事实上也是如此,就算在最后炒肝没了,或者断电断水(系统出现异常),顾客依然可以通过Ticket进行退款操作,这样都不会有什么损失!(虽然这么说,但是实际上包子铺最大化了它的利益,如果炒肝真的没了,浪费了顾客的时间,不过顾客顶多发发牢骚,最后接受)

3 RocketMQ执行流程

1. 发送方向 MQ 服务端发送消息。
2. MQ Server 将消息持久化成功之后,向发送方 ACK 确认消息已经发送成功,此时消息为半消息。
3. 发送方开始执行本地事务逻辑。
4. 发送方根据本地事务执行结果向 MQ Server 提交二次确认(Commit 或是 Rollback),MQ Server 收到Commit 状态则将半消息标记为可投递,订阅方最终将收到该消息;MQ Server 收到 Rollback 状态则删除半消息,订阅方将不会接受该消息。
5. 在断网或者是应用重启的特殊情况下,上述步骤4提交的二次确认最终未到达 MQ Server,经过固定时间后MQ Server 将对该消息发起消息回查。
6. 发送方收到消息回查后,需要检查对应消息的本地事务执行的最终结果。
7. 发送方根据检查得到的本地事务的最终状态再次提交二次确认,MQ Server 仍按照步骤4对半消息进行操作。

4 案例实践

订单支付-支付成功后发送短信-分布式事务

这里通过一个实例来讲一下RocketMQ实现分布式事务具体编码。

场景: 下单场景,订单服务生成订单,当订单支付成功之后,修改订单状态已支付,并且通过短信通知用户支付成功。

数据库设计:

CREATE TABLE `t_order` (
  `id` varchar(255) NOT NULL,
  `name` varchar(255) DEFAULT NULL,
  `state` int(11) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

订单服务service的主要方法:

@Service
public class OrderServiceImpl implements OrderService {
  @Autowired OrderMapper orderMapper;

  @Override
  public void updatePayStatusByOrderId(String orderId) {
    //判断订单是否已支付
    if(!checkOrderPaySuccess(orderId)){
      ExceptionCast.cast(CommonCode.ALREADY_PAID);
    }
    //修改订单状态
    Order order = orderMapper.selectById(orderId);
    order.setState(1);
    orderMapper.updateById(order);
  }

  @Override
  public boolean checkOrderPaySuccess(String orderId) {
    Order order = orderMapper.selectById(orderId);
    if (order.getState() == 0) {
      return true;
    }
    return false;
  }
}

业务流程

1.在订单表创建一个状态是未支付的订单

在数据库中直接创建一个未支付的订单

//0表示未支付
INSERT INTO `t_order` VALUES ('1', '订单', '0');

2.用户支付完成,通过MQ通知短信服务发送短信

OrderController:pay 发送订单支付成功的MQ事务消息,这里注意体会,并不是直接调OrderService::updatePayStatusByOrderId 然后发送普通的MQ消息。而是先发送事务消息到MQ,然后MQ回调订单服务的TransactionListener::executeLocalTransaction,在这里完成订单状态的更新,保证发送事务消息和更新订单状态的一致性。

@RestController
@RequestMapping("/order")
public class OrderController implements OrderControllerApi {

  @Autowired
  TransactionProducer transactionProducer;

  @PostMapping
  public void pay(Order order) throws IOException, MQClientException {
    transactionProducer.sendOrderPaySucessEvent(order);
  }
}

3.订单服务端的事务消息监听器

@Component
public class TransactionProducer implements InitializingBean {


  @Autowired
  OrderService orderService;
  private TransactionMQProducer producer;
  private static Map<String, LocalTransactionState> STATE_MAP = new HashMap<>();

  @Override
  public void afterPropertiesSet() throws Exception {
    producer = new TransactionMQProducer("transaction_producer");
    producer.setNamesrvAddr("192.168.25.114:9876");
    // 设置事务监听器
    ThreadFactory threadFactory =
        new ThreadFactoryBuilder().setNameFormat("transaction-thread-name-%s").build();
    ThreadPoolExecutor executor =
        new ThreadPoolExecutor(
            2, 5, 60, TimeUnit.SECONDS, new ArrayBlockingQueue<>(30), threadFactory);
    producer.setExecutorService(executor);
    producer.setTransactionListener(
        new TransactionListener() {
          @Override
          public LocalTransactionState executeLocalTransaction(Message msg, Object arg) {
            ObjectMapper objectMapper = new ObjectMapper();
            LocalTransactionState state = LocalTransactionState.UNKNOW;
            try {
              Order order = objectMapper.readValue(msg.getBody(), Order.class);
              // 修改订单状态
              orderService.updatePayStatusByOrderId(order.getId());
              // System.out.println(1/0);
              state = LocalTransactionState.COMMIT_MESSAGE;
            } catch (UnsupportedEncodingException e) {
              e.printStackTrace();
              state = LocalTransactionState.ROLLBACK_MESSAGE;
            } catch (IOException e) {
              e.printStackTrace();
              state = LocalTransactionState.ROLLBACK_MESSAGE;
            }
            return state;
          }

          @Override
          public LocalTransactionState checkLocalTransaction(MessageExt msg) {
            System.out.println(
                "状态回查 ---> "
                    + msg.getTransactionId()
                    + " "
                    + STATE_MAP.get(msg.getTransactionId()));
            return STATE_MAP.get(msg.getTransactionId());
          }
        });
    producer.start();
  }

  @Transactional
  public void sendOrderPaySucessEvent(Order order) throws IOException, MQClientException {
    ObjectMapper objectMapper = new ObjectMapper();
    // 构造发送的事务 消息
    Message message =
        new Message(
            "pay_topic",
            objectMapper.writeValueAsString(order).getBytes(RemotingHelper.DEFAULT_CHARSET));

    TransactionSendResult result = producer.sendMessageInTransaction(message, null);
    System.out.println("发送事务消息:" + result.toString());
  }
}

4. 短信通知服务

消费者监听队列,如果队列中有支付成功的消息就发送短信。

public class TransactionConsumer {
    public static void main(String[] args) throws Exception {
        DefaultMQPushConsumer consumer = new
                DefaultMQPushConsumer("HAOKE_CONSUMER");
        consumer.setNamesrvAddr("192.168.25.114:9876");

        // 订阅topic,接收此Topic下的所有消息
        consumer.subscribe("pay_topic", "*");
    consumer.registerMessageListener(
        new MessageListenerConcurrently() {
          @Override
          public ConsumeConcurrentlyStatus consumeMessage(
              List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
            for (MessageExt msg : msgs) {
              try {
                //System.out.println(new String(msg.getBody(), "UTF-8"));
                  ObjectMapper objectMapper = new ObjectMapper();
                  Order order = objectMapper.readValue(msg.getBody(), Order.class);
                  System.out.println("您已成功支付,订单号为"+order.getId());
              } catch (IOException e) {
                  e.printStackTrace();
              }
            }
            return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
          }
        });
        consumer.start();
    }
}

5. 测试

测试结果:返回commit状态时,消费者能够接收到消息,返回rollback状态时,消费者接受不到消息。

支付成功:

 

支付失败:

修改支付的service使其出现bug。

  @Override
  public void updatePayStatusByOrderId(String orderId) {
    //判断订单是否已支付
    if(!checkOrderPaySuccess(orderId)){
      ExceptionCast.cast(CommonCode.ALREADY_PAID);
    }
    //修改订单状态
    Order order = orderMapper.selectById(orderId);
    order.setState(1);
    System.out.println(1/0);
    orderMapper.updateById(order);
  }

不会发送消息,此时我们可以根据消息队列中的消息(存放的订单信息)。将钱退还给客户。 

 

  • 2
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值