redis缓存穿透、缓存击穿、缓存雪崩区别和解决方案

设计一个缓存系统,不得不要考虑的问题就是:缓存穿透、缓存击穿与失效时的雪崩效应。

前台请求,后台先从缓存中取数据,取到直接返回结果,取不到时从数据库中取,数据库取到更新缓存,并返回结果,数据库也没取到,那直接返回空结果。

缓存穿透

描述:

       缓存穿透是指缓存和数据库中都没有的数据,而用户不断发起请求。由于缓存是不命中时被动写的,并且出于容错考虑,如果从存储层查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到存储层去查询,失去了缓存的意义。

在流量大时,可能DB就挂掉了,要是有人利用不存在的key频繁攻击我们的应用,这就是漏洞。

如发起为id为“-1”的数据或id为特别大不存在的数据。这时的用户很可能是攻击者,攻击会导致数据库压力过大。

  解决方案:

接口层增加校验,如用户鉴权校验,id做基础校验,id<=0的直接拦截;

从缓存取不到的数据,在数据库中也没有取到,这时也可以将key-value对写为key-null缓存有效时间可以设置短点,如30秒(设置太长会导致正常情况也没法使用)。这样可以防止攻击用户反复用同一个id暴力攻击

缓存击穿

描述:

      缓存击穿是指缓存中没有但数据库中有的数据(一般是缓存时间到期),这时由于并发用户特别多,同时读缓存没读到数据,又同时去数据库去取数据,引起数据库压力瞬间增大,造成过大压力。

 解决方案:

1、设置热点数据永远不过期。

2、接口限流与熔断,降级。重要的接口一定要做好限流策略,防止用户恶意刷接口,同时要降级准备,当接口中的某些 服务  不可用时候,进行熔断,失败快速返回机制。

3、布隆过滤器bloomfilter就类似于一个hash set,用于快速判某个元素是否存在于集合中,其典型的应用场景就是快速判断一个key是否存在于某容器,不存在就直接返回。布隆过滤器的关键就在于hash算法和容器大小,

4、加互斥锁,互斥锁参考代码如下:

说明:

          1)缓存中有数据,直接走上述代码13行后就返回结果了

         2)缓存中没有数据,第1个进入的线程,获取锁并从数据库去取数据,没释放锁之前,其他并行进入的线程会等待100ms,再重新去缓存取数据。这样就防止都去数据库重复取数据,重复往缓存中更新数据情况出现。

          3)当然这是简化处理,理论上如果能根据key值加锁就更好了,就是线程A从数据库取key1的数据并不妨碍线程B取key2的数据,上面代码明显做不到这点。
 

缓存雪崩

  描述:

      缓存雪崩是指缓存中数据大批量到过期时间,而查询数据量巨大,引起数据库压力过大甚至down机。和缓存击穿不同的是,        缓存击穿指并发查同一条数据,缓存雪崩是不同数据都过期了,很多数据都查不到从而查数据库。

解决方案

  1. 缓存数据的过期时间设置随机,防止同一时间大量数据过期现象发生。
  2. 如果缓存数据库是分布式部署,将热点数据均匀分布在不同搞得缓存数据库中。
  3. 设置热点数据永远不过期。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,下面是Redis缓存穿透击穿雪崩的简单demo: ## Redis缓存穿透 Redis缓存穿透是指查询一个不存在的数据,由于缓存中没有,导致请求直接打到数据库上,从而可能引起数据库压力过大或宕机等问题。 ```python import redis # 初始化Redis连接 redis_conn = redis.Redis(host='localhost', port=6379, db=0) # 模拟查询一个不存在的数据 key = 'non_existent_key' data = redis_conn.get(key) if not data: # 如果Redis缓存中没有该数据,则从数据库中获取数据 # 这里省略从数据库中获取数据的代码 print('Data not found in Redis cache or database!') ``` ## Redis缓存击穿 Redis缓存击穿是指某个热点数据在缓存失效的瞬间,同时有大量并发请求访问该数据,由于缓存失效,这些请求都会直接打到数据库上,从而可能引起数据库压力过大或宕机等问题。 ```python import redis import time # 初始化Redis连接 redis_conn = redis.Redis(host='localhost', port=6379, db=0) # 设置一个热点数据,缓存有效期为10秒 key = 'hot_data' value = 'hot_data_value' redis_conn.setex(key, 10, value) # 模拟大量并发请求访问该热点数据 for i in range(100): data = redis_conn.get(key) if not data: # 如果Redis缓存中没有该数据,则从数据库中获取数据 # 这里省略从数据库中获取数据的代码 print('Data not found in Redis cache or database!') else: print(f'Data: {data}') time.sleep(0.1) # 等待0.1秒,模拟并发请求 ``` ## Redis缓存雪崩 Redis缓存雪崩是指缓存中大量数据在同一时间失效,导致大量并发请求直接打到数据库上,从而可能引起数据库压力过大或宕机等问题。 ```python import redis import time # 初始化Redis连接 redis_conn = redis.Redis(host='localhost', port=6379, db=0) # 设置大量缓存数据,缓存有效期为10秒 for i in range(10000): key = f'data_{i}' value = f'data_{i}_value' redis_conn.setex(key, 10, value) # 模拟大量并发请求访问这些缓存数据 for i in range(10000): key = f'data_{i}' data = redis_conn.get(key) if not data: # 如果Redis缓存中没有该数据,则从数据库中获取数据 # 这里省略从数据库中获取数据的代码 print(f'Data {key} not found in Redis cache or database!') else: print(f'Data {key}: {data}') time.sleep(0.01) # 等待0.01秒,模拟并发请求 ``` 这些demo仅作为演示Redis缓存穿透击穿雪崩的基本情况,实际应用中还需要更加复杂和完善的解决方案

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值