浅谈 AOF 重写机制

Redis的AOF重写通过bgrewriteaof子进程在后台完成,避免主线程阻塞,确保性能。重写过程创建新AOF文件,合并多条命令,减少文件体积。若不重写,可能导致AOF文件过大,影响性能和故障恢复速度。重写过程中,主线程维护AOF和重写缓冲区,确保数据完整。AOF重写不采用覆盖方式,以防文件竞争和重写失败导致原始文件损坏。
摘要由CSDN通过智能技术生成

概述

AOF重写可以产生一个新的AOF文件,这个新的AOF文件和原有的AOF文件所保存的信息一样,但体积更小,可以节省 Redis 的空间。

AOF重写之所以有日志瘦身的作用,原因在于其可以将旧日志文件中的多条命令,在重写后的新日志中变成一条命令。比如对一个list里面的元素写了又删,我就可以合并为一条命令 → LPUSH A B C D…

为什么需要AOF重写

如果不进行AOF重写,会导致AOF文件越来越大,从而产生性能问题:

  1. 文件系统本身对文件大小有限制,无法保存过大的文件。
  2. 如果文件太大,之后再往里面追加命令记录的话,效率也会变低。
  3. 如果发生宕机,AOF中记录的命令要一个个被重新执行,用于故障恢复,如果日志文件太大,整个恢复过程就会非常缓慢,影响到 Redis 的正常使用。

AOF重写流程

AOF重写不会阻塞主线程,其重写过程是由后台子进程 bgrewriteaof 来完成的,从而避免了性能下降。
具体流程如下:

  1. 把主线程的内存拷贝一份给fork出来的 bgrewriteaof 子进程,这里面包含了Redis中最新的数据。
  2. 子进程将其中的数据进行重写。
  3. 主线程维护一个AOF缓冲区(实际上无论重不重写都有这个缓冲区,因为AOF日志写入是 → AOF缓冲区 → AOF文件),如果此时有写操作,则会写入到AOF缓冲区以及AOF日志中,保证数据完整。
  4. 主线程在重写时维护一个AOF重写缓冲区,将重写过程中的写操作记入其中,保证重写后的AOF日志也能记录在重写过程中产生的新数据。
  5. 用新AOF替换老AOF日志。

思考:为什么AOF重写不采用覆盖的方式

  1. 父子进程写同一个文件必然会产生竞争,如果控制竞争就意味着会影响父进程的性能。
  2. 如果AOF重写失败,那么原本的AOF文件相当于被污染了,就直接废了。而采用覆盖的方式则不会有这种负面影响(重写失败就直接删了,一点影响没有)。

参考:蒋德钧老师《Redis核心技术与实战》极客时间专栏,强烈推荐!

  • 4
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Redis AOF重写是一种机制,用于解决AOF文件过大导致IO性能问题的情况。AOF重写的过程并不需要对原有AOF文件进行读取、写入或分析操作,而是通过读取服务器当前的数据库状态来实现的。\[3\]AOF重写的执行流程包括命令追加、文件写入和文件同步以及文件重写。首先,Redis的写命令会被追加到缓冲区aof_buf中。然后,根据不同的同步策略,将aof_buf中的内容同步到硬盘,以确保数据的持久化。最后,定期进行AOF文件的重写,以达到压缩AOF文件的目的。\[3\]通过AOF重写,可以有效地减小AOF文件的大小,提高IO性能,同时保证数据的持久化。 #### 引用[.reference_title] - *1* *3* [缓存数据库REDIS之二:AOF重写原理](https://blog.csdn.net/qq_18343913/article/details/119343547)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [redisaof重写机制](https://blog.csdn.net/qq_63431773/article/details/131691454)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值