redis线程模型
redis是单线程模型,但是采用的是io多路复用模式(也就是非阻塞方式),这种模式下,在接收到用户请求后,多路复用器发送到文件事件分配器的速度就会很快(不需要等待上一个请求获得回复即可处理下一个请求),又由于是单线程模型,所以避免了上下文切换带来的损耗。另外在文件事件分配器这个地方,进行的是纯内存操作,因此速度会非常快。
RDB
RDB:每隔一段时间,把内存中的数据写入磁盘的临时文件,作为快照,恢复的时候把快照文件读进内存。如果宕机重启,那么内存里的数据肯定会没有的,那么再次启动redis后,则会恢复。
RDB的优劣势
优势:
1.每隔一段时间备份,全量备份
2.灾备简单,可以远程传输
3.子进程备份的时候,主进程不会有任何io操作(不会有写入修改或删除),保证备份数据的的完整性
4.相对AOF来说,当有更大文件的时候可以快速重启恢复
劣势:
1.发生故障是,有可能会丢失最后一次的备份数据
2.子进程所占用的内存比会和父进程一模一样,如会造成CPU负担
3.由于定时全量备份是重量级操作,所以对于实时备份,就无法处理了。
RDB的配置
save:
这里是用来配置触发 Redis的 RDB 持久化条件,也就是什么时候将内存中的数据保存到硬盘。
比如“save m n”。表示m秒内数据集存在n次修改时,自动触发bgsave。
默认如下配置:
#表示900 秒内如果至少有 1 个 key 的值变化,则保存save 900 1
#表示300 秒内如果至少有 10 个 key 的值变化,则保存save 300 10
#表示60 秒内如果至少有 10000 个 key 的值变化,则保存save 60 10000
不需要持久化,那么你可以注释掉所有的 save 行来停用保存功能。
stop-writes-on-bgsave-error :
默认值为yes。:如果save过程出错,则停止写操作
如果设置为no可能会造成数据的不一致(不推荐使用)
rdbcompression :
默认值是yes。对于存储到磁盘中的快照,可以设置是否进行压缩存储。
no:关闭,会节约cpu损耗,但是文件会大,
rdbchecksum :
默认值是yes。在存储快照后,我们还可以让redis使用CRC64算法来进行数据校验,但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能。
dir:
设置快照文件的存放路径,这个配置项一定是个目录,而不能是文件名。
AOF
RDB会丢失最后一次备份的rdb文件,但是其实也无所谓,其实也可以忽略不计,毕竟是缓存,丢了就丢了,但是如果追求数据的完整性,那就的考虑使用AOF了。
AOF特点
1.以日志的形式来记录用户请求的写操作。读操作不会记录,因为写操作才会存存储。
2.文件以追加的形式而不是修改的形式。
3.redis的aof恢复其实就是把追加的文件从开始到结尾读取执行写操作。
AOF优劣势
优势:
1.AOF更加耐用,可以以秒级别为单位备份,如果发生问题,也只会丢失最后一秒的数据,大大增加了可靠性和数据完整性。所以AOF可以每秒备份一次,使用fsync操作。
2.以log日志形式追加,如果磁盘满了,会执行redis-check-aof工具
3.当数据太大的时候,redis可以在后台自动重写aof。当redis继续把日志追加到老的文件中去时,重写也是非常安的,不会影响客户端的读写操作。
4.AOF日志包含的所有写操作,会更加便于redis的解析恢复。
劣势;
1.相同的数据,同一份数据,AOF比比RDB大
2⒉针对不同的同步机制,AOF会比RDB慢,因为AOF每秒都会备份做写操作,这样相对与RDB来说就略低。每秒备份fsync没毛病,但是如果客户端的每次写入就做一次备份fsync的话,那么redis的性能就会下降。
3.AOF发生过bug,就是数据恢复的时候数据不完整,这样显得AOF会比较脆弱,容易出现bug,因为AOF没有RDB那么简单,但是呢为了防止bug的产生,AOF就不会根据旧的指令去重构,而是根据当时缓存中存在的数据指令去做重构,这样就更加健壮和可靠了。
AOF配置
# AOF 默认关闭,yes可以开启
appendonly no
# AOF 的文件名
appendfilename "appendonly.aof"
# no:不同步
# everysec:每秒备份,推荐使用
# always:每次操作都会备份,安全并且数据完整,但是慢性能差
appendfsync everysec
# 重写的时候是否要同步,no可以保证数据安全
no-appendfsync-on-rewrite no
# 重写机制:避免文件越来越大,自动优化压缩指令,会fork一个新的进程去完成重写动作,新进程里的内存数据会被重写,此时旧的aof文件不会被读取使用,类似rdb
# 当前AOF文件的大小是上次AOF大小的100% 并且文件体积达到64m,满足两者则触发重写
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
RDB和AOF到底该如何选择
选择的话,两者加一起才更好。因为两个持久化机制你明白了,剩下的就是看自己的需求了,需求不同选择的也不一定,但是通常都是结合使用。有一张图可供总结:
1.如果你能接受一段时间的缓存丢失,那么可以使用RDB
2.如果你对实时性的数据比较care,那么就用AOF
3.使用RDB和AOF结合一起做持久化,RDB做冷备,可以在不同时期对不同版本做恢复,AOF做热备,保证数据仅仅只有1秒的损失。当AOF破损不可用了,那么再用RDB恢复,这样就做到了两者的相互结合,也就是说Redis恢复会先加载AOF,如果AOF有问题会再加载RDB,这样就达到冷热备份的目的了。
https://baijiahao.baidu.com/s?id=1654694618189745916&wfr=spider&for=pc