Redis的持久化机制
RDB: Redis DataBase
AOF: Append Only File
Redis的持久化机制- RDB
什么是RDB
RDB:每隔一段时间,把内存中的数据写入磁盘的临时文件,作为快照,恢复的时候把快照文件读进内存。
如果宕机重启,那么内存里的数据肯定会没有的,那么再次启动redis后,则会恢复。
备份与恢复
内存备份 --> 磁盘临时文件
临时文件 --> 恢复到内存
RDB优劣势
● 优势
1. 每隔一段时间备份,全量备份。
2. 灾备简单,可以远程传输。
3. 子进程备份的时候,主进程不会有任何io操作(不会有写入修改或删除), 保证备份数据的的完整性。
4. 相对AOF来说,当有更大文件的时候可以快速重启恢复。
● 劣势
1. 发生故障时,有可能会丢失最后一次的备份数据。
2. 子进程所占用的内存比会和父进程一模一-样,如会造成CPU负担。
3. 由于定时全量备份是重量级操作,所以对于实时备份,就无法处理了。
RDB的配置
1. 保存位置:可以在redis.conf自定义:/user/local/redis/working/dump.rdb
2. 保存机制:
3. save 900 1
● 如果1个缓存更新,则900秒后备份
save 300 10
● 如果10个缓存更新,则5分钟后备份
save 60 10000
● 如果10000个缓存更新,则1分钟后备份
4. stop-writes-on-bgsave-error
● yes: 如果save过程出错,则停止写操作
● no:可能造成数据不一致
5. rdbcompression
● yes:开启rdb压缩模式
● no:关闭,会节约cpu损耗, 但是文件会大,道理同nginx
6. rdbchecksum
● yes: 使用CRC64算法校验对rdb进行数据校验,有10%性能损耗
● no: 不校验
总结
RDB适合大量数据的恢复,但是数据的完整性和一致性可能会不足。
Redis的持久化机制- AOF
什么是AOF
1. RDB会丢失最后一次备份的rdb文件,如果要追求数据的完整性,就需要考虑使用AOF了。
2. 以日志形式来记录用户的写操作,读操作不会记录。
3. 文件以追加的形式而不是修改的形式。
4. redis的aof恢复其实就是把追加的文件从开始到结尾读取执行写操作。
AOF优劣势
● 优势
1. AOF可以以秒为单位进行备份,如果发生问题,也只丢失最后一秒的数据,大大增加了可靠性和数据完整性。
2. 以log日志形式追加,如果磁盘满了,会执行 redis-check-aof 工具。
3. 当数据太大的时候,redis可以在后台自动重写aof。当redis继续把日志追加到老的文件中去时,
重写也是非常安全的,不会影响客户端的读写操作。
4. aof日志包含所有的写操作,会更加便于redis的解析恢复。
● 劣势
1. 相同的数据,AOF文件比RDB文件大。
2. 针对不同的同步操作,AOF会比RDB慢,因为AOF每秒都会备份做写操作,这样相对与RDB来说就慢了。
3. AOF为了健壮和可靠,不会根据旧的指令去恢复,而是根据当时缓存中存在的数据指令去恢复。
AOF的配置
appendonly on
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
选择RDB还是AOF?
1. 如果你能接受一段时间的缓存丢失,那么可以使用RDB。
2. 如果你对实时性的数据比较看重,那么就用AOF。
3. 使用RDB和AOF结合一起做持久化
- RDB做冷备,可以在不同时期对不同版本做恢复;
- AOF做热备,保证数据仅仅只有1秒的损失。当AOF破损不可用了,那么再用RDB恢复。
这样就做到了两者的相互结合,也就是说redis恢复会先加载AOF,如果AOF有问题会再加载RDB,
这样就达到冷热备份的目的了。