redis持久化

一、RDB(Redis DataBase)

1、是什么

在指定的时间间隔内将内存中的数据集快照写入磁盘,也就是Snapshot快照,恢复时将快照文件读入内存中.
redies会单独创建(fork)一个子进程来进行持久化,会先将数据写入一个临时文件中,带持久化过程结束了,在用这个临时文件替换上次持久化好的文件。整个过程中主进程是不进行任何的I/O操作的,这确保了极高的性能。如果要进行大规模的数据的恢复,且对于数据恢复的完整性不是很敏感,那么RDB方式要比AOF方式更加高效.
RDB缺点:是最后一次持久化后的数据可能丢失。

2、fork是什么

fork的作用就是复制一个与当前进程一样的进程。新进程的所有数据(变量,环境变量,程序计数器等)数值都与原进程保持一致,但是是一个全新的进程,并作为原进程的子进程

3、RDB保存的是dump.rdb文件
4、配置位置

在这里插入图片描述

5、如何触发RDB快照

1)配置文件中默认的快照配置:冷拷贝后重新使用,可以cp拷贝一份
2)命令save或者bgsave
a、save:save时只管保存,去其他不管,全部阻塞
b、bgsavve:reis会在后台异步进行快照操作,快照同时还可以响应客户端请求,可以通过lastsave命令获取最后一次执行快照的时间
3)执行flushall命令,也会查收dump.rdb文件,但里面时空的,没意义

6、如何恢复

将备份的文件(dump.rdb)移动到redis的安装目录并启动服务即可
config get dir获取目录

7、优势

适合大规模数据恢复
对数据完整性和一致性要求不高

8、总结

在这里插入图片描述

二、AOF(Append Only File)

1、是什么

以日志的形式来记录每一个写操作,将redis执行过的所有写命令记录下来(读操作不记录),只允许追加文件不可以改写文件,redis启动之初会读取该文件并重新构建数据,换而言之,redis重启的话就会根据日志文件的内容将写指令从前到后执行一次完成数据的恢复工作

2、配置位置

在这里插入图片描述
在这里插入图片描述

3、AOF启动/修复/恢复

1)正常恢复

启动:修改默认的appendonly no 的值为yes
将有数据的aof文件复制一份保存到对应目录(config get dir)
恢复:重启redis然后重新加载

2)异常恢复

启动:修改默认的appendonly no 的值为yes
备份写坏的AOF文件
修复:使用redis-check-aof --fix进行修复
恢复:重启redis重新加载

4、AOF保存的文件默认为appendonly.aof文件
5、Rewrite

1)是什么

AOF采用文件追加的方式,文件会越来越大,为了避免这种情况,新增了重写机制,当AOF文件大小超过所设定的阈值时,redis就会启动AOF文件的内容压缩,只保留可以恢复数据的最小指令集,可以使用命令 bgrewriteaof

2)重写原理

AOF文件持续增加过大时,会fork出一条新进程来将文件重写(也是险些临时文件最后再写rename)遍历新进程的内存数据,每条记录有一个set语句,重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容使用命令的方式重写了一个新的aof文件,这点和快照类似。

3)触发机制

redis会记录上次重写时aof大小,默认配置时当AOF文件大小时上次rewrite后大小的一倍且文件大于64M时触发

6、优势

1)每秒同步:appendfsync always 同步持久化,每次发生数据变更会立即记录到磁盘,新年较差但数据完整性较好
2)每修改同步: appendsync everysec 异步操作,每秒记录,若一秒内宕机,有数据丢失
2) 不同步: appendsync no 从不同步

7、劣势

对相同数据集而言aof文件远大于rdb文件,恢复速度慢于rdb
aof运行效率要慢于rdb,每秒同步策略效率较好,不同步效率和rdb效率相同

8、总结

在这里插入图片描述

三、总结

1、官网建议

1)RDB持久化方式能够在指定的时间对数据进行快照存储
2)AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始数据,AOF命令以redis协议追加保存每次写操作到文件末尾。
3)Redis还能对AOF文件进行后台重写,使得AOF文件体积不至于过大.
4)只做缓存:如果你只希望你的数据在服务器运行的时候存在,你也可以不使用任何持久化方式。
5)同时开启两种持久化方式:在这种情况下,当redis重启时会优先载入AOF文件来恢复原始数据,因为在通常情况下AOF文件保存数据要比RDB文件保存的数据集要完整。RDB数据不实时,同时使用两者时,重启服务器也只会找AOF文件。
6)那要不要只使用AOF呢?快速重启,而且不会有AOF可能潜在的bug,留作一个以防万一的手段

2、性能建议

1) 因为RDB文件只用作后背用途,建议在slave上持久化RDB文件,而且只要15分钟备份一次就够了,只保留save 900 1 这条规则
2)如果Enable AOF,好处时在最恶劣的情况下也只会丢失不超过两秒的数据,启动脚本较简单,只加载自己的AOF文件就可以了,代价时带来了持续的I/O,而是AOF的rewrite的最后将rewrite过程中产生的新数据写到新文件造成的阻塞几乎时不可避免的。只要硬盘许可,应该减少AOF rewrite的频率,AOF重写的基础大小默认值64M太小了,可以设置为5G以上,默认超过原始大小100%时重写可以改到适当数值。
3)如果不 ENable AOF ,仅靠Master-salve Replication 实现高可用也是可以的,能省掉一大笔IO也减少了rewrite时带来的系统波动,代价时如果Master/Slave同时挂掉,会丢失十几分钟的数据,启动脚本也要笔记两个Master/Slave中的RDB文件,载入较新的那个。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值