redis的aof的重写机制

已于 2023-07-13 13:38:53 修改
阅读量837 收藏 2
点赞数 1
分类专栏： redis面试题 文章标签： redis java 数据库
于 2023-07-12 22:39:30 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_63431773/article/details/131691454
版权

redis有两中数据持久化的方法，RDB和AOF。其中的AOF技术是相对RDB几乎实时去实现数据指令的一个持久化，将每一个数据操作指令以日志追加形式写入aof文件里面，但是如果一直追加有可能导致aof文件过大，造成IO性能的问题，为解决这个aof文件过大问题，redis设计出AOF重写机制。

AOF重写机制 

通过压缩AOF文件里面的相同指令保留最新的一个数据操作指令，即将存储了某个key的多次变更记录只是存储最新的变更记录即可，丢弃历史变更记录 。

 重写机制详细步骤

  1. 旧AOF文件过大触发重写机制
  2. 创建子进程构建一个新的aof文件
  3. 子进程读取当前redis里面的数据，写入到新的aof文件里面
  4. 读取redis数据期间，主进程如果有其他新的操作指令则写入重写缓存中
  5. 重写完成以后，将重写缓存追加到新的aof文件中
  6. 用新的aof文件覆盖现有的aof文件 

 

无语堵上西楼
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Redis 持久化之RDB和AOF.doc
10-09
Redis 持久化是确保数据安全的重要机制，它提供了两种主要的方法：RDB（Redis Database）和 AOF（Append Only File）。RDB 是一种快照式的持久化方式，而 AOF 则记录每次写操作的日志。 RDB 持久化在特定条件下将...
Redis两种持久化方案RDB和AOF详解
09-09
Redis的持久化机制是确保数据在系统崩溃或重启后能够得以恢复的关键特性。它提供了两种主要的持久化方案：RDB（Redis DataBase）和AOF（Append Only File）。这两种方式各有特点，适用于不同的场景需求。 **RDB持久...
Redis中AOF文件重写与同步
Cover_sky的博客
03-24 857
Redis服务器进程就是一个时间循环(loop),这个循环中的文件时间负责接收客户端的命令请求，以及向客户端发送命令回复，而时间事件则负责执行像serverCron函数这样需要定时运行的函数。因为服务器在处理文件事件时可能会执行些命令，使得一些内容被追加到aof_buf缓冲区里面，所以在服务器每次结束一个事件循环之前，它都会调用flushAppendOnlyFile函数，考虑是否将aof_buf缓冲区中的内容写入和保存到AOF文件里面，这个过程可以用以下伪代码表示。
缓存数据库REDIS之二：AOF重写原理
云来云去的博客
08-03 2835
一、为什么使用AOF RDB持久化是将进程数据写入文件，而AOF持久化，则是将Redis执行的每次写、删除命令记录到单独的日志文件中，查询操作不会记录; 当Redis重启时优先执行AOF文件中的命令来恢复数据。 与RDB相比，AOF的实时性更好，因此已成为主流的持久化方案。 二、AOF 重写作用 AOF 持久化是通过保存被执行的写命令来记录数据库状态和相关数据，所以AOF文件的大小随着时间推进会越来越大；那么通过AOF文件进行还原出数据库的时间也会相应增...
什么是 AOF 重写？AOF 重写机制的流程是什么？
最新发布
2401_84419325的博客
06-09 1106
AOF （Append Only File）是 Redis 持久化的一种方式，其通过记录 Redis 执行的每一条命令，重启之后通过重新执行 Redis 中的命令来恢复数据。不过，随着 Redis 执行命令的不断增多，AOF 文件越来越大，但是很多数据其是不一定都是有意义的，比如原来 set age 10，后面又来个 set age 18，然后又来个 set age 30，我们这个时候就会发现，只有最后一个 age 是有意义的，前面都是没有用的。
Redis持久化之AOF
weixin_44305700的博客
03-16 664
Redis持久化之AOF一、AOF(Append Only File)基础AOF文件作用AOF持久化的实现AOF的工作流程三、执行流程1、总体流程2、fork实现复制原理四、RDB文件五、 启动时加载六、 RDB常用配置总结七、优缺点1、优点2、缺点 一、AOF(Append Only File)基础 AOF文件作用 以日志的形式来记录每个写操作（读操作不记录），将Redis执行过的所有写指令记录下来(读操作不记录)，只许追加文件但不可以改写文件，redis启动之初会读取该文件重新构建数据，换言之，red
浅谈 AOF 重写机制
小生的博客
07-14 1675
AOF重写可以产生一个新的AOF文件，这个新的AOF文件和原有的AOF文件所保存的信息一样，但体积更小，可以节省 Redis 的空间。AOF重写之所以有日志瘦身的作用，原因在于其可以将旧日志文件中的多条命令，在重写后的新日志中变成一条命令。比如对一个list里面的元素写了又删，我就可以合并为一条命令 → 。如果不进行AOF重写，会导致AOF文件越来越大，从而产生性能问题：AOF重写不会阻塞主线程，其重写过程是由后台子进程 来完成的，从而避免了性能下降。 具体流程如下：...
redis 的aof重写操作详细解读
m0_73513215的博客
05-05 446
在重写过程中，Redis会创建一个临时文件，将所有的写操作记录到这个文件中，然后再将这个文件中的操作按照顺序重新写入到新的追加文件中。Redis使用追加文件（append-only file）来记录所有的写操作，这个文件会不断地增长，直到达到指定的大小限制。当文件大小达到一定阈值时，Redis会启动一个后台进程，将文件进行重写，去掉其中的冗余操作。需要注意的是，重写操作会占用一定的系统资源，可能会影响Redis的性能。因此，在进行重写操作时，需要根据实际情况来设置阈值和时间间隔，以平衡性能和空间的消耗。
怎样理解Redis中的AOF重写？
Blue92120的博客
11-15 534
如果 AOF 同步策略配置的是 always，则直接将命令写回 旧的日志文件 ，并且保存一份命令至 AOF重写缓冲区 ，这些操作对新的日志文件是不存在影响的。而在 bgrewriteaof 子进程完成会日志文件的重写操作后，会提示主线程已经完成重写操作，主线程会将 AOF 重写缓冲中的命令追加到新的日志文件后面。Redis 通过创建一个新的 AOF 文件来替换现有的 AOF，新旧两个 AOF 文件保存的数据相同，但新 AOF 文件没有了冗余命令。1、fork 子进程时，需要拷贝虚拟页表，会对主线程阻塞。
Redis5.0 Windows64
08-26
- 数据持久化改进：RDB（Redis Database Backup）快照的性能得到优化，同时AOF（Append Only File）重写策略也更加智能，减少了磁盘占用。 - 模块系统：允许开发人员扩展Redis的功能，创建自定义数据类型或命令。 ...
redis-7.0.11
06-14
- 改进了 AOF 重写机制，减少了重写过程中的阻塞时间，同时保持了日志文件的紧凑性。 4. **安全性和稳定性**： - 加强了安全性，例如改进了认证和授权机制，增强了对 TLS/SSL 的支持，使得数据传输更加安全。 - ...
Redis 重写原理
Leon_Jinhai_Sun的博客
03-09 714
注意：重写aof文件的操作，并没有读取旧的aof文件，而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,替换原有的文件这点和快照有点类似。 # 重写流程 - 1. redis调用fork ，现在有父子两个进程 子进程根据内存中的数据库快照，往临时文件中写入重建数据库状态的命令 - 2. 父进程继续处理client请求，除了把写命令写入到原来的aof文件中。同时把收到的写命令缓存起来。这样就能保证如果子进程重写失败的话并不会出问题。 - 3. 当子进程把快照内容写入已命令方式写到临时文件中后
Redis AOF重写
Leon_Jinhai_Sun的博客
03-09 612
用来在一定程度上减小AOF文件的体积
Redis持久化——AOF机制详解
若明天不见
01-19 1854
Redis提供了RDB和AOF的持久化选项。本文主要介绍AOF的核心概念、同步步骤、保存模式、AOF重写详解及AOF的优缺点，还介绍了RDB和AOF混合方式的运行机制。AOF（Append Only File）：以协议文本的方式，将所有对数据库进行过写入的命令（及其参数）记录到 AOF 文件，以此达到记录数据库状态的目的
【Redis】Redis持久化之AOF详解（Redis专栏启动）
小明的Java问道之路
02-16 6462
本文为Redis持久化系列第二篇，本文讲解兼具广度与深度，首先讲解什么是RedisAOF、如何开启AOF持久化，深入其AOF的原理，AOF持久化实现、AOF数据恢复、AOF三种写回硬盘策略、AOF重写机制，解析RedisAOF要先执行命令后写日志，以及在实战过程中AOF和RDB对比​​​​​​​，最后扩展Redis4.0新特性的混合持久化模式。
redis 的aof，rdb与aof重写机制
qq_43562988的博客
05-30 1099
aof重写 AOF的重写机制 前面也说到了，AOF的工作原理是将写操作追加到文件中，文件的冗余内容会越来越多。所以聪明的 Redis 新增了重写机制。当AOF文件的大小超过所设定的阈值时，Redis就会对AOF文件的内容压缩。 重写的原理：Redis 会fork出一条新进程，读取内存中的数据，并重新写到一个临时文件中。并没有读取旧文件（你都那么大了，我还去读你？？？ o(ﾟДﾟ)っ傻啊！）。最后替换旧的aof文件。 触发机制：当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。这里的
Redis 持久化：AOF 日志
向北~的博客
04-03 135
如果此时 Redis 是用作缓存，还可以从后端数据库重新读入数据进行恢复，但是，如果Redis是直接用作数据库的话，此时，因为命令没有记入日志，所以就无法用日志进行恢复了。这是因为，AOF日志也是在主线程中执行的，如果在把日志文件写入磁盘时，磁盘写压力大，就会导致写盘很慢，进而导致后续的操作也无法执行了。AOF重写后，日志文件会缩小，但是，要把整个数据库的最新数据的操作日志都写回磁盘，仍然是一个非常耗时的过程。这样一来，即使宕机了，这个AOF日志的操作仍然是齐全的，可以用于恢复。
Redis持久化机制和AOF重写原理
zhangyuanshuai的博客
07-15 739
目录Redis持久化快照(Snapshot)1.特点2.快照生成方式a) BGSAVEb) SAVEc) 服务器配置d) SHUTDOWN指令AOF(Append Only File)只追加日志文件1.特点2.开启AOF持久化a) 修改配置文件3.日志追加频率4.修改日志同步频率AOF文件的重写1.AOF带来的问题2.AOF重写3.触发重写方式4.重写原理总结 Redis持久化 Redis官方提供了两种持久化方法。 快照(Snapshot) AOF(Append Only File)只追加日志文件 快照
redis AOF重写
07-28
Redis AOF重写是一种机制，用于解决AOF文件过大导致IO性能问题的情况。AOF重写的过程并不需要对原有AOF文件进行读取、写入或分析操作，而是通过读取服务器当前的数据库状态来实现的。\[3\]AOF重写的执行流程包括命令...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值