描述redis的AOF重写过程

最新推荐文章于 2024-03-25 22:33:14 发布
最新推荐文章于 2024-03-25 22:33:14 发布
阅读量576 收藏 1
点赞数
分类专栏： 运维 文章标签： redis 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shanyaodou/article/details/126690730
版权

1、redis主进程通过fork创建子进程；

2、子进程根据redis内存中的数据创建数据库重建命令序列于临时文件中；

3、与此同时，父进程继续响应客户端请求，并将其中的写请求继续追加至原来的AOF文件中，额外的，这些新的写请求会被放置在一个缓冲队列中；

4、子进程重写完成后会通知父进程，父进程把缓冲队列中的命令写入临时文件中；

5、父进程用临时文件替换老的aof文件

shanyaodou
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis学习笔记-AOF日志&重写机制
qq_38937634的博客
12-30 1197
文章目录Redis学习笔记-AOF日志&重写机制1.笔记图2.AOF 日志实现3.写日志先后顺序的思考4.AOF 日志记录的内容举例说明5.由 AOF 日志记录引发的潜在风险思考6.潜在风险对应的三种写回策略7.性能问题8.AOF 重写机制9.AOF 重写机制引发的阻塞思考 Redis学习笔记-AOF日志&重写机制 Redis 使用最多的场景是 缓存，若出现服务器宕机的情况，内存中的数据将全部丢失，若恢复数据的时候从后端数据库读取就会给数据库造成很大的压力，并且数据恢复缓慢，所以对于 Red
Redis两种持久化方案RDB和AOF详解
09-09
Redis的持久化机制是确保数据在系统崩溃或重启后能够得以恢复的关键特性。...在配置文件中，可以设置`auto-aof-rewrite-percentage`和`auto-aof-rewrite-min-size`来自动触发AOF重写，避免日志文件过大。
Redis AOF重写实现原理
lengjian68的专栏
08-23 1655
AOF（append only file）对Redis进行持久化是通过保存被执行的写命令来记录数据库状态的，随着服务器运行，AOF文件内容越来越多，载入AOF文件的时间会越来越长，影响Redis服务。 所以有必要对’冗余‘的AOF文件进行优化，即AOF文件重写。 那为什么要进行AOF后台重写？因为Redis单线程特性，AOF重写操作会引入大量写操作，引起stop the world，所以fork出子进程执行AOF后台重写，这样父进程可以继续处理命令请求。 AOF重写原理 怎么重写？是对旧的AOF文件进行读
redis的aof的重写机制
qq_63431773的博客
07-12 754
redis有两中数据持久化的方法，RDB和AOF。其中的AOF技术是相对RDB几乎实时去实现数据指令的一个持久化，将每一个数据操作指令以日志追加形式写入aof文件里面，但是如果一直追加有可能导致aof文件过大，造成IO性能的问题，为解决这个aof文件过大问题，redis设计出AOF重写机制。
Redis中RDB的dirty机制和AOF中的后台重写机制
Cover_sky的博客
03-25 912
当服务器成功执行一个数据库修改命令之后，程序就会对dirty计数器进行更新:命令修改了多少次数据库，dirty计数器的值就增加多少。
Redis 重写原理
Leon_Jinhai_Sun的博客
03-09 705
注意：重写aof文件的操作，并没有读取旧的aof文件，而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,替换原有的文件这点和快照有点类似。 # 重写流程 - 1. redis调用fork ，现在有父子两个进程 子进程根据内存中的数据库快照，往临时文件中写入重建数据库状态的命令 - 2. 父进程继续处理client请求，除了把写命令写入到原来的aof文件中。同时把收到的写命令缓存起来。这样就能保证如果子进程重写失败的话并不会出问题。 - 3. 当子进程把快照内容写入已命令方式写到临时文件中后
怎样理解Redis中的AOF重写？
Blue92120的博客
11-15 530
如果 AOF 同步策略配置的是 always，则直接将命令写回 旧的日志文件 ，并且保存一份命令至 AOF重写缓冲区 ，这些操作对新的日志文件是不存在影响的。而在 bgrewriteaof 子进程完成会日志文件的重写操作后，会提示主线程已经完成重写操作，主线程会将 AOF 重写缓冲中的命令追加到新的日志文件后面。Redis 通过创建一个新的 AOF 文件来替换现有的 AOF，新旧两个 AOF 文件保存的数据相同，但新 AOF 文件没有了冗余命令。1、fork 子进程时，需要拷贝虚拟页表，会对主线程阻塞。
redis-5.0.4.tar.gz下载及redis安装过程
04-09
redis-check-aof 日志文件检测工(比如断电造成日志损坏，可以检测并修复) redis-check-dump 快照文件检测工具，效果类上 redis-cli 客户端 redis-server 服务端 10： 启动与连接 启动redis并指定配置文件 cd /usr/...
【大厂面试】Redis 持久化AOF、RDB概念总结
01-21
AOF 持久化方式记录每次对服务器写的操作，当服务器重启的时候会重新执行这些命令来恢复原始的数据，AOF命令以 redis 协议追加保存每次写的操作到文件末尾，redis 还能对 AOF 文件进行后台重写，使得 AOF 文件的体积...
超强、超详细Redis入门教程
最新发布
05-19
16.聊聊redis持久化-AOF重写 17.聊聊redis持久化-如何选择RDB和AOF 18.聊聊主从-用法 19.聊聊主从一同步原理 20.聊聊redis的事务处理 21.教你看懂redis配置-简介 22.教你看懂redis配置.通用 23.教你看懂redis配置-...
redis面试题：请描述一下redis中AOF的重写过程？
wcy_frist的博客
06-13 130
最后为了避免子进程在重写的过程中，主进程的数据会发生变化，导致AOF文件里面的数据和redis内存中的数据不一致的问题，redis还做了优化，也就是说，子进程在重写的过程中，主进程的数据变更需要追加到AOF的重写缓冲区里面，等到AOF文件重写完成以后，再把AOF重写缓冲区里面的数据，追加到新的AOF文件里面，这样一来就可以保证新的AOF文件里面的数据和当前的redis内存数据是一致的。AOF是redis里面提供一种数据持久化的方式。它里面采用了指令追加的一个方式，去近乎实时的去实现数据指令的一个持久化。
Redis 持久化：AOF 日志
向北~的博客
04-03 133
如果此时 Redis 是用作缓存，还可以从后端数据库重新读入数据进行恢复，但是，如果Redis是直接用作数据库的话，此时，因为命令没有记入日志，所以就无法用日志进行恢复了。这是因为，AOF日志也是在主线程中执行的，如果在把日志文件写入磁盘时，磁盘写压力大，就会导致写盘很慢，进而导致后续的操作也无法执行了。AOF重写后，日志文件会缩小，但是，要把整个数据库的最新数据的操作日志都写回磁盘，仍然是一个非常耗时的过程。这样一来，即使宕机了，这个AOF日志的操作仍然是齐全的，可以用于恢复。
浅谈 AOF 重写机制
小生的博客
07-14 1666
AOF重写可以产生一个新的AOF文件，这个新的AOF文件和原有的AOF文件所保存的信息一样，但体积更小，可以节省 Redis 的空间。AOF重写之所以有日志瘦身的作用，原因在于其可以将旧日志文件中的多条命令，在重写后的新日志中变成一条命令。比如对一个list里面的元素写了又删，我就可以合并为一条命令 → 。如果不进行AOF重写，会导致AOF文件越来越大，从而产生性能问题：AOF重写不会阻塞主线程，其重写过程是由后台子进程 来完成的，从而避免了性能下降。 具体流程如下：...
redis 的aof重写操作详细解读
m0_73513215的博客
05-05 432
在重写过程中，Redis会创建一个临时文件，将所有的写操作记录到这个文件中，然后再将这个文件中的操作按照顺序重新写入到新的追加文件中。Redis使用追加文件（append-only file）来记录所有的写操作，这个文件会不断地增长，直到达到指定的大小限制。当文件大小达到一定阈值时，Redis会启动一个后台进程，将文件进行重写，去掉其中的冗余操作。需要注意的是，重写操作会占用一定的系统资源，可能会影响Redis的性能。因此，在进行重写操作时，需要根据实际情况来设置阈值和时间间隔，以平衡性能和空间的消耗。
redis 的aof，rdb与aof重写机制
qq_43562988的博客
05-30 1092
aof重写 AOF的重写机制 前面也说到了，AOF的工作原理是将写操作追加到文件中，文件的冗余内容会越来越多。所以聪明的 Redis 新增了重写机制。当AOF文件的大小超过所设定的阈值时，Redis就会对AOF文件的内容压缩。 重写的原理：Redis 会fork出一条新进程，读取内存中的数据，并重新写到一个临时文件中。并没有读取旧文件（你都那么大了，我还去读你？？？ o(ﾟДﾟ)っ傻啊！）。最后替换旧的aof文件。 触发机制：当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。这里的
缓存数据库REDIS之二：AOF重写原理
云来云去的博客
08-03 2696
一、为什么使用AOF RDB持久化是将进程数据写入文件，而AOF持久化，则是将Redis执行的每次写、删除命令记录到单独的日志文件中，查询操作不会记录; 当Redis重启时优先执行AOF文件中的命令来恢复数据。 与RDB相比，AOF的实时性更好，因此已成为主流的持久化方案。 二、AOF 重写作用 AOF 持久化是通过保存被执行的写命令来记录数据库状态和相关数据，所以AOF文件的大小随着时间推进会越来越大；那么通过AOF文件进行还原出数据库的时间也会相应增...
【Java面试】请描述一下Redis中AOF 重写的过程
跟着Mic学架构
06-22 474
好的。AOF是Redis里面的一种数据持久化方式，它采用了指令追加的方式。近乎实时的去实现数据指令的持久化，因为AOF，会把每个数据更改的操作指令，追加存储到aof文件里面。所以很容易导致AOF文件出现过大，造成IO性能问题。Redis为了解决这个问题，设计了AOF重写机制，也就是说把AOF文件里面相同的指令进行压缩，只保留最新的数据指令。简单来说，如果aof文件里面存储了某个key的多次变更记录，但是实际上...
Redis学习笔记三、持久化方式
菜到不敢run
04-06 410
Redis持久化方式   Redis（Remote Dictionary Server）是非关系型的键值对数据库，可以根据键以O(1)的时间复杂度取出或插入关键值。数据是存在内存中的。   Redis是内存数据库，如果不将内存中的数据库状态保存到磁盘中，一旦服务器进程退出，服务器中的数据库状态也会消失。所以Redis提供了持久化功能。 1. RDB（Redis Database）   RDB持久化存储就是在指定的时间间隔内将内存中的数据集快照写入磁盘，也就是快照，它恢复时是将快照文件直接读到内存里。   R
redis AOF重写
07-28
AOF重写的过程并不需要对原有AOF文件进行读取、写入或分析操作，而是通过读取服务器当前的数据库状态来实现的。\[3\]AOF重写的执行流程包括命令追加、文件写入和文件同步以及文件重写。首先，Redis的写命令会被追加...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值