redis持久化方式RDB与AOF


前言

redis除了将键值对保存在内存中,还提供了持久化功能,持久化有两种方案,RDB与AOF


一、RDB持久化

RDB通过快照的形式将数据保存到磁盘中。所谓快照,可以理解为在某一时间点将数据集拍照并保存下来,以二进制的形式写入磁盘中,默认文件名为dump.rdb。

RDB 的触发有三种机制,执行save命令;执行bgsave命令;在redis.config中配置。
save使用redis主进程进行RDB,会阻塞业务请求;bgsave通过fork()子进程进行RDB,不会阻塞业务请求;上述两种方式都需要在客户端中去执行命令,redis重启后,命令失效。在生产环境中,通常会选择在redis.config中对持久化进行配置的方式。

二、AOF持久化

AOF 持久化记录服务器执行的所有写操作命令,并在服务器启动时,通过重新执行这些命令来还原数据集。 AOF 文件中的命令全部以 redis 协议的格式保存,新命令会被追加到文件的末尾。 redis 还可以在后台对 AOF 文件进行重写(rewrite),使得 AOF 文件的体积不会过大。redis如果同时开启了两种持久化方式, 当redis 重启时, 它会优先使用 AOF 文件来还原数据集, 因为 AOF 文件保存的数据集通常比 RDB 文件所保存的数据集更完整。

AOF也有不同的触发方案:
always:每次发生数据修改就会立即记录到磁盘文件中,这种方案的完整性好但是IO开销大,性能差;
everysec:每秒同步一次,速度有所提升。但是如果宕机可能失去这一秒内的数据;
no:默认配置,即不使用 AOF 持久化方案。

可以在redis.config中进行配置,appendonly no改换为yes,再通过appendfsync配置需要的方案。

AOF重写

随着redis的运行,AOF的日志会越来越长,如果实例宕机重启,那么重放整个AOF将会变得十分耗时,而在日志记录中,又有很多无意义的记录,比如我现在将一个数据 incr 一千次,那么就不需要去记录这1000次修改,只需要记录最后的值即可。所以就需要进行 AOF 重写。

redis 提供了bgrewriteaof命令用于对AOF日志进行重写,该指令运行时会开辟一个子进程对内存进行遍历,然后将其转换为一系列的 redis 的操作指令,再序列化到一个日志文件中。完成后再原子式地替换原有的AOF文件。

同样的也可以在redis.config中对重写机制的触发进行配置:通过将no-appendfsync-on-rewrite设置为yes,开启重写机制;auto-aof-rewrite-percentage 100意为比上次从写后文件大小增长了100%再次触发重写;

auto-aof-rewrite-min-size 64MB 意为当文件至少要达到64MB才会触发制动重写。

重写也是会耗费资源的,所以当磁盘空间足够的时候,这里可以将 64MB 调整更大写,降低重写的频率,达到优化效果。


三、RDB与AOF的优劣

RDB 的优点:

RDB非常适合数据备份: RDB是非常紧凑的文件。 这种文件你可以在最近的 24 小时内,每小时备份一次。 这样的话,即使遇上问题,也可以随时将数据集还原到不同的版本。
RDB 非常适合灾难恢复:它只有一个文件,可以将它传送到别的数据中心。
RDB 可以最大化redis 的性能:父进程在保存 RDB 文件时唯一要做的就是 fork 出一个子进程,然后这个子进程就会处理接下来的所有保存工作,父进程无须执行任何磁盘 I/O 操作。
RDB 在恢复大数据集时的速度比 AOF 的恢复速度要快。

RDB 的缺点:

如果你需要尽量避免在服务器故障时丢失数据,那么 RDB 不适合你。
虽然 redis 允许你设置不同的保存点来控制保存 RDB 文件的频率,但你不可能每一秒钟保存一次RDB文件,假如你5分钟才保存一次 RDB 文件。 在这种情况下, 一旦发生故障停机, 你就可能会丢失好几分钟的数据。
每次保存 RDB 的时候,redis 都要 fork() 出一个子进程,并由子进程来进行实际的持久化工作。 在数据集比较庞大时, fork() 可能会非常耗时,造成服务器在毫秒级停止处理客户请求,如果数据集非常巨大,并且 CPU 时间非常紧张,那么这种停止时间甚至可能会达到秒级。

AOF 的优点:

使用 AOF 持久化会让 Redis 变得非常耐久:你可以设置不同的 fsync(同步)策略,比如无 fsync ,每秒钟一次 fsync ,或者每次执行写入命令时 fsync 。AOF 的默认策略为每秒钟 fsync 一次,在这种配置下,Redis 仍然可以保持良好的性能,并且就算发生故障停机,也最多只会丢失一秒钟的数据( fsync 会在后台线程执行,所以主线程可以继续努力地处理命令请求)。AOF 文件是一个只进行追加操作的日志文件,即使日志因为某些原因而包含了未写入完整的命令(比如写入时磁盘已满,写入中途停机,等等), redis-check-aof 工具也可以轻易地修复这种问题。
Redis 可以在 AOF 文件体积变得过大时,自动地在后台对 AOF 进行重写: 重写后的新 AOF 文件包含了恢复当前数据集所需的最小命令集合。 整个重写操作是绝对安全的,因为 Redis 在创建新 AOF 文件的过程中,会继续将命令追加到现有的 AOF 文件里面,即使重写过程中发生停机,现有的 AOF 文件也不会丢失。 而一旦新 AOF 文件创建完毕,Redis 就会从旧 AOF 文件切换到新 AOF 文件,并开始对新 AOF 文件进行追加操作。AOF 文件有序地保存了对数据库执行的所有写入操作, 这些写入操作以 Redis 协议的格式保存, 因此 AOF 文件的内容非常容易被人读懂, 对文件进行分析(parse)也很轻松。 导出(export) AOF 文件也非常简单。

AOF 的缺点:

对于相同的数据集来说,AOF 文件的体积通常要大于 RDB 文件的体积。根据所使用的 fsync 策略,AOF 的速度可能会慢于 RDB 。 在一般情况下, 每秒 fsync 的性能依然非常高, 而关闭 fsync 可以让 AOF 的速度和 RDB 一样快, 即使在高负荷之下也是如此。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值