Redis持久化RDB与AOF

最新推荐文章于 2023-06-03 11:36:56 发布
最新推荐文章于 2023-06-03 11:36:56 发布
阅读量330 收藏
点赞数
分类专栏： 数据库 文章标签： redis nosql 缓存
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42750240/article/details/123033063
版权
本文详细解析了Redis的RDB和AOF两种持久化机制，比较了它们的执行原理、优劣势及应用场景。RDB适合大规模恢复，但可能丢失最后快照数据；AOF备份更稳健，但占用空间大，恢复慢。官方推荐两者结合使用，针对不同需求灵活选择。
摘要由CSDN通过智能技术生成

目录

RDB(Redis DataBase)

什么是RDB

在指定的时间间隔内将内存中的数据集快照写入磁盘，也就是行话讲的Snapshot快照，它恢复时是将快照文件直接读到内存里

备份是如何执行的

Redis会单独创建(fork)一个子进程来进行持久化，会先将数据写入到一个临时文件中，待持久化过程都结束了，再用这个临时文件替换上次持久化好的文件。整个过程中，主进程是不进行任何IO操作的，这就确保了极高的性能，如果需要进行大规模数据恢复， 且对于数据恢复的完整性不是非常敏感，那RDB方式要比AOF方式更加高校。RDB的缺点是最后一次持久化后的数据可能丢失

配置文件

/etc/redis.conf中配置dbfilename dump.rdb
会生成dump.rdb文件

优势

  • 适合大规模的数据恢复
  • 对数据完整性和一致性要求不高更适合使用
  • 节省磁盘空间
  • 恢复速度快

劣势

  • Fork的时候，内存中的数据被克隆了一份，大致2倍的膨胀性需要考虑
  • 虽然Redis在fork时使用了写时拷贝技术，但是如果数据庞大时还是比较消耗性能
  • 在备份周期在一定间隔时间做一次备份，所以如果Redis意外down掉的话，就会丢失最后一次快照后的所有修改

为什么Redis持久化操作RDB最后一次持久化操作会丢失数据

Redis会单独创建fork一个子进程来进行持久化，会先将数据写入到一个临时文件中，待持久化过程都结束了，再用这个临时文件替换上次持久化好的文件。整个过程中，主进程是不进行任何IO操作的，这就确保了极高的性能，如果需要进行大规模数据的恢复，且对于数据恢复的完整性不是非常敏感，那RDB方式是比较高效的

RDB快照方式，默认是打开的，所以说，每次RDB快照之间是有时间间隔的，如果在一次RDB快照时发生宕机，那上一次快照之后的key数据就会丢失了(前提是没有开启AOF持久化方式 )

AOF(Append Of File)

AOF是什么

以日志的形式来记录每个写操作(增量保存)，将Redis执行过的所有写指令记录下来(读操作记录)，只许追加文件但不可以改写文件，redis启动之初会读取该文件重新构建数据，换言之，redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作

AOF持久化流程

  1. 客户端的请求写命令会被append追加到AOF缓冲区内
  2. AOF缓冲区根据AOF持久化策略[always, everysec, no]将操作sync同步到磁盘的AOF文件中

修复aof

redis-check-aof --fix appendonly.aof

AOF同步频率设置

appendfsync always // 始终同步，每次redis的写入都会立刻记入日志，性能较差但数据完整性比较好
appendfsync everysec // 每秒同步，每秒记入日志一次，如果宕机，本秒的数据可能丢失
appendfsync no // redis不主动进行同步，把同步时机交给操作系统

Rewrite压缩

  1. AOF采用文件追加方式，文件会越来越大为避免出现此情况，新增重写机制，当AOF文件的大小超过所设定的阈值时，Redis就会启动AOF文件的内容压缩，只保留可以恢复数据的最小指令集，可以使用命令bgrewriteaof
  2. 重写原理，如何实现重写
    Redis会记录上次重写时AOF大小，默认配置是当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。重写虽然可以节约大量磁盘空间，减少恢复时间。但是每次重写还是有一定的负担的，因此设定Redis要满足一定条件才会进行重写。

优势

  • 备份机制更稳健，丢失数据概率更低
  • 可读的日志文本，通过操作AOF稳健，可以处理误操作

劣势

  • 比起RDB占用更多的磁盘空间
  • 恢复备份速度更慢
  • 每次读写都同步的话，有一定的性能压力

AOF(append of file)和RDB(redis database)同时开启

默认根据AOF

总结

官方推荐两个都启用
如果对数据不敏感，可以选单独用RDB
不建议单独用AOF，因为可能会出现Bug
如果只是纯内存缓存，可以都不用

hokool
关注
专栏目录
redis持久化rdb切换aof
weixin_42715413的博客
02-19 1106
选择的标准，就是看系统是愿意牺牲一些性能，换取更高的缓存一致性（aof），AOF 的数据完整性比RDB高，但记录内容多了，会影响数据恢复的效率。还是愿意写操作频繁的时候，不启用备份来换取更高的性能，待手动运行save的时候，再做备份（rdb），RDB 持久化适合大规模的数据恢复但它的数据一致性和完整性较差。 redis 持久化配置 无缝从rdb切换到aof 安全保留数据 rdb方式默认将数据持久化...
redis持久化RDB和AOF
法海不懂
04-26 272
redis简介： redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)和zset(有序集合)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一...
redis不重启,切换到RDB备份到AOF备份
weixin_30687051的博客
01-19 92
redis不重启,切换RDB备份到AOF备份 确保redis版本在2.2以上 查看redis版本 redis-server -v 实验环境准备 本文是在redis4.0中,通过config set命令,达到不重启redis服务,从RDB持久化切换到AOF # 启动redis服务端,通过命令切换到aof模式 config set appendonly yes config set save ...
Redis的持久化机制（RDB和AOF）（1）
qq_44299529的博客
03-02 913
RDB：Redis DataBase AOF：Append Only File 官网参照：Redis Persistence – Redis 一、RDB 1、什么是RDB RDB：每隔一段时间，把内存中的数据写入磁盘的临时文件，作为快照，恢复的时候把快照文件读进内存。如果宕机重启，那么内存里的数据肯定会没有的，那dis后，则会恢复 ...
Redis RDB文件解析
liuhansheng
08-24 4736
从以上的各类型保存形式可以发现，虽然数据类型很多，但是底层元素保存都遵循简单的字符串保留方式，所以重点总结了KEY在rdb文件中的保留形式通过以上的介绍，希望大家能对RDB文件有个简单的了解，并最终指导开发RDB解析程序，为开发提供更加丰富的离线key分析产品。从源码角度解析如何生成和解读RDB文件redis rdb 文件格式详解RDB分析源码redis-rdb-tools地址。
Redis的AOF和RDB相互切换
weixin_44784018的博客
01-07 1249
一.从RDB切换到AOF redis-cli 127.0.0.1:6379> save OK 127.0.0.1:6379> CONFIG SET appendonly yes OK 127.0.0.1:6379> save OK 127.0.0.1:6379> shutdown save not connected> 修改redis配置，打开aof vim redis.conf appendonly yes 启动redis redis-server redis.co
Redis里的【RDB】是什么？
最新发布
赵达宇的博客
06-03 1455
长久保存数据。即使设备关机了（断电），数据也还在。就这么简单。想想看，如果把【正则表达式】名字改为【规则表达式】，并解释清楚，其用途是筛选出符合该规则的数据，是不是也会有更多的人理解【正则表达式】。
Redis持久化RDB和AOF区别详解
12-14
为了确保数据在服务器重启或异常情况下的安全，Redis提供了两种主要的持久化机制：RDB（Redis Database Persistence，即快照）和AOF（Append Only File，追加日志）。下面将详细解释这两种持久化方式的区别。 **RDB...
Redis 持久化之RDB和AOF.doc
10-09
Redis 持久化是确保数据安全的重要机制，它提供了两种主要的方法：RDB（Redis Database）和 AOF（Append Only File）。RDB 是一种快照式的持久化方式，而 AOF 则记录每次写操作的日志。 RDB 持久化在特定条件下将...
RDB文件格式
耕云者~
11-30 3321
RDB文件格式一、Redis RDB文件二、解析RDB的高级算法2.1 Magic Number2.2 RDB 版本号2.3 操作码2.3.1 数据库选择器2.3.2 Resizeb信息2.3.3 辅助字段2.3.4 键值对密钥到期时间戳值类型键值2.4 CRC64校验码三、编码方式3.1 Length Encoding 长度编码3.2 字符串编码3.2.1 长度前缀字符串3.2.2 整数作为字符...
什么是rdb
xixibuchi的博客
07-27 1726
什么是rdb
Redis持久化，RDB和AOF是什么？
zhangdayan的博客
11-27 1727
一、RDB是什么？ RDB持久化是把当前进程数据生成快照保存到硬盘的过程，触发RDB持久化过程分为手动触发和自动触发。 触发机制：手动触发分别对应为save和bgsave命令 save命令：阻塞当前Redis服务器，直到RDB过程完成为止，对于内存比较多的实例会造成时间阻塞。线上环境不建议使用。 bgsave命令：Redis进程执行fork操作创建子进程，RDB持久化过程由子进程负责，完成...
redis的 rdb 和 aof 持久化的区别
热门推荐
jackpk的专栏
06-11 5万+
redis的 rdb 和 aof 持久化的区别 url: http://ptc.35.com/?p=275 aof，rdb是两种 redis持久化的机制。用于crash后，redis的恢复。 rdb的特性如下： Code: fork一个进程，遍历hash table，利用copy on write，把整个db dump保存下来。 save, shutdown, slave 命令会触发
rdb文件解析及恢复
amuo65354的博客
05-26 161
参见:rdb_parse 转载于:https://www.cnblogs.com/jadic/p/3752629.html
redis 持久化详解,RDB和AOF是什么？他们优缺点是什么？运行流程是什么？
weixin_33836874的博客
01-19 1073
Redis支持RDB和AOF两种持久化机制，持久化功能有效地避免因进程退出造成的数据丢失问题，当下次重启时利用之前持久化文件即可实现数据恢复。1. RDB是什么 RDB持久化是把当前进程数据生成快照保存到硬盘的过程，触发RDB持久化过程分为手动触发和自动触发。 1.1.1 触发机制 手动触发分别对应save和bgsave命令： save命...
redis aof 备份和恢复_什么是RDB和AOF? 一文了解Redis持久化!
weixin_39842237的博客
12-12 269
概述本文提供Redis持久化技术说明, 建议所有Redis用户阅读. 如果您想更深入了解Redis持久性原理机制和底层持久性保证, 请参考文章 揭秘Redis持久化: http://antirez.com/post/redis-persistence-demystified.htmlRedis持久化Redis提供了不同级别的持久化选项:RDB模式, Redis数据库备份文件(Redis Dat...
Redis持久化RDB和AOF区别
03-28
Redis 持久化是 Redis 存储数据的永久化功能，主要有两种方式：RDB 和 AOF。 RDB（Redis DataBase）是 Redis 的快照持久化，它在指定的时间间隔内对当前数据集进行持久化，将数据存储在一个二进制文件中。这种方法...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

hokool

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值