延迟双删
这个问题是涉及到缓存redis和主从mysql的数据更新,在高并发中,是很容易出现缓存和数据库之间数据不一致问题的。
如果出现不一致的情况是很危险的,比如我们常见的限量抢购,它既要响应快,又要数据可靠。
我什么说是双删呢?
首先我们知道redis中缓存的数据是用来读取的,写数据一般都是要写入mysql中。
如果先删了缓存,还没有来得及写MySQL,另一个线程就来读,发现缓存空,则去数据库读取数据写入缓存,此时缓存中为脏数据。
如果先写库,在删除缓存前,写库线程一旦挂掉没有删掉缓存,那缓存将一直存储这脏数据。
所以删除一次是肯定不行的,所以得双删。
但是如果没有延迟又会有什么问题?
比如我先进行了一次缓存删除,由于高并发,刚刚有一个读请求读取了mysql中的脏数据,如果这个数据立即写入到缓存中,那么我进行第二次删除的时候是可以删掉这个脏数据的,但是如果是第二次删除发生在写入缓存之前,那么还会有脏数据问题。
总结流程
- 先删除缓存
- 再写数据库
- 休眠xx毫秒(根据具体业务时间)
- 再次删除缓存
xx毫秒怎么确定?
需要评估项目读数据业务逻辑耗时,以确保读请求结束,写请求可删除读请求造成的缓存脏数据。
该策略还要考虑 redis 和数据库主从同步的耗时。最后的写数据的休眠时间:则在读数据业务逻辑的耗时的基础上,加上几百ms即可。比如:休眠1秒。
当然还有一些实现思路,但是效果肯定是不如延迟双删好,但是开发代价会比较友好,比如下面实现思路。
设置缓存过期时间
理论上,设置缓存过期时间,是保证最终一致性的解决方案。
所有的写操作以DB为准,只要到达缓存过期时间,则后面的读请求自然会从DB读取新值,然后回填缓存。
结合双删策略+缓存超时设置,这样最差的情况就是在超时时间内数据存在不一致,而且又增加写请求耗时。
写完数据库后,再次删除缓存成功保证
上述的方案有一个缺点,那就是操作完数据库后,由于种种原因删除缓存失败,这时,可能就会出现数据不一致的情况。
需提供保障重试方案。
- 方案一
具体流程:
- 更新数据库数据
- 缓存因为种种问题删除失败
- 将需要删除的key发送至消息队列
- 自己消费消息,获得需要删除的key
- 继续重试删除操作,直到成功
然而,该方案有一个缺点,对业务线代码造成大量的侵入。于是有了方案二。
在方案二中,启动一个订阅程序去订阅数据库的binlog,获得需要操作的数据。在应用程序中,另起一段程序,获得这个订阅程序传来的信息,进行删除缓存操作。
- 方案二
具体流程:
- 更新数据库数据
- 数据库会将操作信息写入binlog日志当中
- 订阅程序提取出所需要的数据以及key
- 另起一段非业务代码,获得该信息
- 尝试删除缓存操作,发现删除失败
- 将这些信息发送至消息队列
- 重新从消息队列中获得该数据,重试操作。