MQ消费顺序异常导致生产问题
消费顺序异常产生的原因
由于公司服务器异常,导致公司的一些服务重启异常,MQ服务假死(只能接收消息,无法消费消息)。当时正在消费的数据消费异常(项目组设置了MQ消息消费报错会钉钉通知),保存了消费异常的记录,服务重启后重新推送MQ消息。在服务异常期间,该条数据又做了两次变更,重启后就直接消费成功了,而后又重新推送了异常的消息,导致最终服务存储了中间阶段变更的数据。
消费顺序异常造成的问题
保存的中间阶段数据会用来生成客户签署的贷款协议,导致客户签署的协议数据错误,需要作废重新生成协议。
解决消费顺序异常的根本方案
临时处理
找到最后变更的MQ消息重新推送处理,后续需要推送的数据找到最后消费的消息,再次进行补偿推送。
根本解决
由于MQ消息存储了变更的内容,而MQ消息消费又不能完全控制消费顺序,导致先生成的消息后消费完成,产生错误数据。所以项目组对MQ进行了调整,MQ只传递状态值,不传递变更数据的实体,当收到MQ消息时,通过接口取最新数据更新,保证数据存储的准确性。