目录
4、Redis做为mysql数据库的缓存,mysql数据库是如何与redis进行数据同步的呢?(双写一致)
7、Redis的数据淘汰策略?(Redis中的数据都没有过期,又有新的数据进来/Redis内存用完了怎么办?)
1、Redis主从同步数据的流程?(注意和Mysql主从数据同步区分)
Redis数据结构
Redis是一个基于内存的key-value结构数据库。基于内存存储,读写性能高;适合存储热点数据(热点商品、资讯、新闻);企业应用广泛。NoSql非关系型数据库。
key是字符串类型,value有5种常用数据类型:
1、字符串string
string普通字符串,常用
2、哈希hash
hash适合存储对象
3、列表list
list按照插入顺序排序,可以有重复元素
4、集合set
set无序集合,没有重复元素
5、有序集合sorted set
sorted set有序集合,没有重复元素。每个元素都会关联一个double类型的分数,通过分数来为集合中的成员进行从小到大的排序,有序集合的成员是唯一的,但是分数却可以重复。
Redis作为缓存
1、缓存穿透问题?解决方案?
缓存穿透是指查询一个一定不存在的数据,如果从存储层查不到数据则不写 入缓存,这将导致这个不存在的数据每次请求都要到 DB 去查询,可能导致 DB 挂掉。这种情况大概率是遭到了攻击。
常用解决方法:布隆过滤器
布隆过滤器主要是用于检索一个元素是否在一个集合中。它的底层主要是先去初始化一个比较大数组,里面存放的二进制0或1。在一 开始都是0,当一个key来了之后经过3次hash计算,模于数组长度找到数据 的下标然后把数组中原来的0改为1,这样的话,三个数组的位置就能标明一 个key的存在。查找的过程也是一样的。
缺点:布隆过滤器有可能会产生一定的误判,我们一般可以设置 这个误判率,大概不会超过5%,其实这个误判是必然存在的,要不就得增 加数组的长度,其实已经算是很划分了,5%以内的误判率一般的项目也能 接受,不至于高并发下压倒数据库。
2、缓存击穿问题?解决方案?
缓存击穿的意思是对于设置了过期时间的key,缓存在某个时间点过期的时 候,恰好这时间点对这个Key有大量的并发请求过来,这些请求发现缓存过 期一般都会从后端 DB 加载数据并回设到缓存,这个时候大并发的请求可能 会瞬间把 DB 压垮。
解决方案:
互斥锁:当缓存失效时,不立即去load db,先使用如 Redis 的 setnx 去设置一个互斥锁,当获取锁成功再进行 load db的操作并回设缓存,否则重试get缓存的方法。强一致,性能差。
设置逻辑过期:在设置key的时候,设置一个过期时间字段一块存入缓存中,不给当前 key设置过期时间;当查询的时候,从redis取出数据后判断时间是否过期;如果过期则开通另外一个线程进行数据同步,当前线程正常返回数据,这个数据不是最新。高可用,性能优。
3、缓存雪崩问题?解决方案?
缓存雪崩意思是设置缓存时采用了相同的过期时间,导致缓存在某一时刻同时失效,请求全部转发到DB,DB 瞬时压力过重雪崩。
缓存雪崩与缓存击穿的区别: 雪崩是很多key,击穿是某一个key缓存。
解决方案:可以将缓存失效时间分散开,比如可以在原有的失效时间基 础上增加一个随机值,比如1-5分钟随机,这样每一个缓存的过期时间的重 复率就会降低,就很难引发集体失效的事件。
利用redis集群提高服务的可用性(哨兵模式、集群模式);
给缓存业务添加降级限流策略(ngxin、spring cloud gateway);
给业务添加多级缓存(Guava、Caffeine);
4、Redis做为mysql数据库的缓存,mysql数据库是如何与redis进行数据同步的呢?(双写一致)
能保证强一致性的方法:
读写锁(排他锁):使用redisson实现的读写锁,在读的时候添加共享锁,可以保证读 读不互斥,读写互斥。当我们更新数据的时候,添加排他锁,它是读写,读读都互斥,这样就能保证在写数据的同时是不会让其他线程读数据的,避免 了脏数据。这里面需要注意的是读方法和写方法上需要使用同一把锁才行。底层使用也是setnx,保证了同时只能有一个线程操作锁住的方法。
延时双删:写操作的时候,我们先把缓存中的数据删除,然后更新数据库,最后再延时删除缓存中的数据,其中这个延时多久不太好确定,在延时的过程中可能会出现脏数据,并不能保证强一致性,所以没有采用它。(延时双删仍有脏数据风险)
先删数据库或者先删缓存都存在问题。
删两次是因为先删除缓存再修改数据库,修改数据库期间缓存中可能会产生脏数据。
延时是因为在主从数据库中,让主数据库的数据同步到从库中去。
不能保证强一致性,但是能最终一致性的方法:
采用的阿里的canal组件实现数据同步:不需要更改业务代码,部署 一个canal服务。canal服务把自己伪装成mysql的一个从节点,当mysql数据 更新以后,canal会读取binlog数据,然后在通过canal的客户端获取到数据, 更新缓存即可。
二进制日志(BINLOG)记录了所有的 DDL(数据定义语言)语句和 DML(数据操纵语言)语句,但不包括数据查询(SELECT、SHOW)语句。
5、Redis作为缓存,数据持久化是怎么做的?
RDB:Redis Database Backup File (Redis数