redis系列(六):Redis持久化
Redis持久化
RDB(Redis DataBase)
在指定的时间间隔内将内存中的数据快照写入到磁盘。也就是snapshot快照,它恢复时将快照文件直接读到内存中。
RDB原理
Redis会单独创建一个子进程来进行持久化,把数据写入到一个临时文件中,等持久化过程结束了,再用这个临时文件替换上次持久化好的文件。整个过程中主线程是不进行任何IO操作的,这就确保了极高的性能,如果需要大规模的数据的恢复,且对于数据恢复的完整性不是特别敏感,那RDB方式比AOF方式更加的高效。RDB的缺点是最后一次持久化后的数据可能会丢。
Fork
Fork的作用是复制一个与当前进程一样的进程,新进程的所有数据、数值都与原进程一致,但是是一个全新的进程,并作为原进程的子进程。
dump.rdb(数据保存的文件)
RDB保存的是dump.rdb文件。
RDB配置
save 900 1
900秒有1个更改就触发
save 300 10
300秒有10个更改就触发
save 60 10000
60秒有10000个更改就触发
stop-writes-on-bgsave-error yes
确保发生错误时保持数据的一致性。
rdbcompression yes(压缩 rdb)
默认为yes,会消耗一些CPU资源。
如何手动备份?
客户端执行命令:
- save:save时只管保存、其他不管,全部阻塞。
- bgsave:Redis会在后台异步进行快照操作,快照同时还可以响应客户端请求。可以通过lastsave命令获取最后一次成功执行快照的时间。
RDB优势
- 适合大规模的数据恢复
- 对数据完整性和一致性要求不高时使用
RDB劣势
- 在一定间隔时间做一次备份,如果redis意外挂掉的话,就会丢失最后一次快照后的修改
- Fork的时候,内存中的数据被克隆了一份,大致2倍的膨胀性需要考虑。
如何停止
动态停止RDB保存规则的方法:redis-cli config set save " "。
AOF(Append Only File)
以日志的形式来记录redis的每一个写操作,将redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文件重新构建数据,redis重启的话就会根据日志文件的内容将写指令从前到后执行一次来完成数据的恢复工作。
appendonly.aof文件
AOF保存的文件是appendonly.aof
aof配置
appendonly no
默认是关闭的
appendfilename “appendonly.aof”(aof文件)
aof的默认文件,跟dump.rdb是共存的。redis启动时,优先使用aof文件。
appendfsync everysec
一共有三种策略,默认为everysec。
- everysec: 异步操作,每秒记录。如果一秒内宕机,有数据丢失。
- always:同步持久化,每次发生数据变更会被立即记录到磁盘,性能较差但数据完整性比较好。
- no:不同步
no-appendfsync-on-rewrite no
重写时是否可以运用appendfsync,用默认no即可,保证数据安全性。
auto-aof-rewrite-percentage 100
设置重写的基准值
auto-aof-rewrite-min-size 64mb
设置重写的基准值
Rewrite 重写
AOF采用文件追加的方式,文件会越来越大,为避免这种情况,新增了重写机制,当aof文件的大小超过设定的阈值时,redis就会启动AOF文件内容压缩,只保留可以恢复数据的最小指令集,可以使用命令bgrewriteaof。
重写原理
AOF文件持续增长而过大时,会fork出一个新进程来讲文件重写(也是先写临时文件最后再rename),遍历新进程内存中的数据,每条记录有一条的Set语句。重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件。
触发机制
Redis会记录上次重写时的AOF大小,默认配置是当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。
AOF优势
- 每秒同步
- 每次修改同步
- 不同步
AOF劣势
相同数据集的数据而言,AOF文件要远大于rdb文件,恢复速度慢于rdb。aof运行效率要慢于rdb,每秒同步策略效率较好,不同步效率和rdb相同。