Redis学习笔记-AOF日志&重写机制

最新推荐文章于 2024-09-09 19:18:11 发布
最新推荐文章于 2024-09-09 19:18:11 发布
阅读量1.3k 收藏 3
点赞数 3
分类专栏： Redis 文章标签： nosql mysql aof rdb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38937634/article/details/111998406
版权
Redis的AOF日志是其持久化机制之一，先执行命令后记录日志，确保正确性。文章探讨了AOF日志的风险与三种写回策略：Always、Everysec、No。AOF重写机制通过后台子进程bgrewriteaof减少存储空间，避免阻塞主线程。
摘要由CSDN通过智能技术生成

文章目录

Redis学习笔记-AOF日志&重写机制

Redis 使用最多的场景是 缓存，若出现服务器宕机的情况，内存中的数据将全部丢失，若恢复数据的时候从后端数据库读取就会给数据库造成很大的压力，并且数据恢复缓慢，所以对于 Redis 来说，实现数据的持久化是非常重要的，而 AOF日志 和 RDB快照是 Redis 实现持久化的两大机制，这篇文章学习一下 AOF 持久化日志。

1.笔记图

在这里插入图片描述

2.AOF 日志实现

在这里插入图片描述

  • AOF 是一种写后日志，即先执行 Redis 命令，后记录日志。

3.写日志先后顺序的思考

  • Redis 为了避免额外开销，写 AOF 日志的时候不会对些命令语法检查
  • 如果先写日志再执行命令可能会记录错误的命令，恢复数据时，可能出错
  • 只有能执行成功的命令，才会被记录到日志中</
最低0.47元/天 解锁文章
爱因诗贤
关注
专栏目录
来聊聊Redis的AOF重写机制
Hi，我是sharkchili，CSDN Java领域博客专家，开源项目JavaGuide维护人员，我想写一些有意思的东西，希望对你有帮助。
07-09 1114
因为近期收到很多读者的私信，所以也专门创建了一个交流群，感兴趣的读者可以通过上方的公众号获取笔者的联系方式完成好友添加，点击备注。因为近期收到很多读者的私信，所以也专门创建了一个交流群，感兴趣的读者可以通过上方的公众号获取笔者的联系方式完成好友添加，点击备注。文件，基于del等指令将抹去一些无用的键值对，但是笔者查看源码后发现，此类说法有着严重的错误，所以笔者就基于此文来详细讨论一些。，可以看到其内部就是生成一个临时文件，然后遍历数据库中的键值对，根据键值对的类型生成相应的。以本文为例，假设我们。
Redis之AOF重写及其实现原理
热门推荐
darcy.q.cs的专栏
04-06 3万+
AOF 重写 AOF 文件重写的实现 AOF重写功能的实现原理 AOF后台重写 使用子进程进行AOF重写的问题 如何修正 效果 完成AOF重写之后 触发AOF后台重写的条件 总结 refAOF 重写 AOF 持久化是通过保存被执行的写命令来记录数据库状态的，所以AOF文件的大小随着时间的流逝一定会越来越大；影响包括但不限于：对于Redis服务器，计算机的存储压力；AOF还原出数据库状态的时间增加；
Redis 持久化机制
happyJared
08-25 162
持久化数据，也就是将内存中的数据写入到硬盘里，大部分原因是为了之后重用数据（比如重启机器、机器故障后恢复数据），或是为了防止系统故障而将数据备份到远程。 Redis 不同于 Memcached 的重要一点就是，Redis 支持持久化，且支持两种不同的持久化操作。 默认的持久化方式叫快照（snapshotting，RDB），另一种方式是只追加文件（append-only file，A...
都2024年了还不明白Redis持久化？RDB文件、AOF文件、AOF重写
最新发布
程序员-杨胡广的博客
09-09 3213
Redis本身是一个基于内存的数据库，它提供了RDB持久化、AOF持久化两种方式，用来将存储在内存中的数据库状态保存到磁盘中。前者是保存了整个Redis。AOF文件是AOF持久化的产物，AOF持久化通过保存服务器所有执行的写命令来记录数据库状态。对于一个键值对，AOF旧的文件会保存数十条对该键值对的修改命令，这样浪费了大量内存空间。现有的AOF文件，新旧两个AOF文件所保存的数据库状态相同，但新AOF文件。到新AOF文件的末尾，从而保证两个新旧AOF文件状态一致。的冗余命令，使得新的AOF文件体积很小。
浅谈 AOF 重写机制
小生的博客
07-14 1747
AOF重写可以产生一个新的AOF文件，这个新的AOF文件和原有的AOF文件所保存的信息一样，但体积更小，可以节省 Redis 的空间。AOF重写之所以有日志瘦身的作用，原因在于其可以将旧日志文件中的多条命令，在重写后的新日志中变成一条命令。比如对一个list里面的元素写了又删，我就可以合并为一条命令 → 。如果不进行AOF重写，会导致AOF文件越来越大，从而产生性能问题：AOF重写不会阻塞主线程，其重写过程是由后台子进程 来完成的，从而避免了性能下降。 具体流程如下：...
【redis】AOF重写机制
weixin_43346403的博客
06-21 283
3.触发AOF重写时，内部做了哪些事情。
Redis学习笔记-基础篇
qq_51628990的博客
07-18 1029
Sentinel(哨兵)是用于监控Redis集群中Master状态的工具，是Redis高可用解决方案，哨兵可以监视一个或者多个redismaster服务，以及这些master服务的所有从服务。aof的文件会越来越大，当文件大小达到阈值的时候，会触发rewrite，这时候会文件进行压缩操作，删除被覆盖掉的、无意义的操作。写到redis内存的同时，会先写一份aof的日志，后续如果需要恢复的化，从头到尾执行日志里的内容就行了。数据过期后，并不会立刻删除，等到下次访问的时候，redis才会删除该数据。...
redis如何设置定时过期_Redis学习笔记--Redis数据过期策略详解
weixin_39618597的博客
12-19 380
本文对Redis的过期机制简单的讲解一下讲解之前我们先抛出一个问题，我们知道很多时候服务器经常会用到redis作为缓存，有很多数据都是临时缓存一下，可能用过之后很久都不会再用到了(比如暂存session，又或者只存放日行情股票数据)那么就会出现一下几个问题了Redis会自己回收清理不用的数据吗？如果能，那如何配置？如果不能，如何防止数据累加后大量占用存储空间的问题？之前一直接触Redis不是很深入...
Redis学习笔记12----持久化(AOF)
weixin_43776305的博客
04-21 162
RDB存储的弊端 存储数据量较大，效率较低；基于快照思想，每次读写都是全部数据，当数据量很大时，效率会很低 大数据量下的IO性能很低 基于fork创建子进程，产生额外的消耗 宕机带来数据丢失风险 解决思路 不写全数据，仅记录部分数据 改记录数据为记录操作过程 对所有操作均进行记录，排除丢失数据的风险 AOF概念 AOF(append only file)持久化：以独立日志的方式记录每次命令，重启时在重新执行AOF文件中的命令达到恢复数据的目的，与RDB相比可以简单描述为改记录数据为记录数据产生的过
Redis学习笔记1
08-08
本文将基于提供的“Redis学习笔记1”内容，详细介绍Redis的安装、启动、单线程特性、发布订阅机制、持久化策略以及AOF和RDB的区别。 1. **Redis安装与启动** Redis的安装通常涉及下载源码包、解压、编译和安装。在...
redis灵魂拷问：聊一聊AOF日志重写
zjj2006的专栏
10-13 1365
AOF日志重写会阻塞主线程吗
redis aof 文件重写机制
Andy86869的博客
04-03 4409
redis 随着命令不断的写入数据，aof 文件会越来越大。为了解决这个问题，redis 引入了 aof 文件重写机制，以便压缩 aof 体积 ，更小的 aof 文件可以更快的被 redis 加载。 aof 文件重写是将 redis 中的数据转换为 写命令同步更新到 aof 文件的过程。 重写 aof 后 为什么么可以变小 清除了一些无效命令 eg. del srem 进程内超时的数据不再写入 ...
redis的aof的重写机制
qq_63431773的博客
07-12 938
redis有两中数据持久化的方法，RDB和AOF。其中的AOF技术是相对RDB几乎实时去实现数据指令的一个持久化，将每一个数据操作指令以日志追加形式写入aof文件里面，但是如果一直追加有可能导致aof文件过大，造成IO性能的问题，为解决这个aof文件过大问题，redis设计出AOF重写机制。
缓存数据库REDIS之二：AOF重写原理
云来云去的博客
08-03 3498
一、为什么使用AOF RDB持久化是将进程数据写入文件，而AOF持久化，则是将Redis执行的每次写、删除命令记录到单独的日志文件中，查询操作不会记录; 当Redis重启时优先执行AOF文件中的命令来恢复数据。 与RDB相比，AOF的实时性更好，因此已成为主流的持久化方案。 二、AOF 重写作用 AOF 持久化是通过保存被执行的写命令来记录数据库状态和相关数据，所以AOF文件的大小随着时间推进会越来越大；那么通过AOF文件进行还原出数据库的时间也会相应增...
redis源码分析之AOF重写
qq_32791231的博客
06-06 1029
redis源码分析（AOF重写相关）一、背景二、AOF重写步骤简述三、缓存区四、相关源码 一、背景 AOF是Redis增量模式的持久化方式，随着redis的持续运行，会不断有新的数据写入AOF文件中，逐渐占用大量磁盘空间，还会降低Redis启动时候的回放加载效率。Redis中有rewrite机制来合并AOF历史记录。 说明：阅读此文需要对redis配置文件有一定的了解。 本文基于朋友发来的一份重写日志，通过源码对重写实现原理进行分析，日志如下图（后续源码中会出现此日志的绝大部分内容） 二、AOF重写步骤简
Redis-只追加日志AOF重写原理
文文x的博客
10-22 390
我们知道，Redis持久化机制有RDB快照持久化和只追加日志AOF持久化。AOF持久化可以实现数据的超高安全性，比RDB持久化更能保证数据的安全，达到不丢失1秒间的数据，但是随着Redis的不断运行，长期运行，日志文件会不断变大，甚至高达T级数据集，因此这就涉及到一个AOF重写机制： AOF 持久化是通过保存被执行的写命令来记录数据库状态的，所以AOF文件的大小随着时间的流逝一定会越来越大；影响包括但不限于：对于Redis服务器，计算机的存储压力；AOF还原出数据库状态的时间增加； 为了解决AOF文件体积膨
Redis中的AOF重写是什么意思？
zy1992As的博客
11-14 308
如果 AOF 同步策略配置的是 always，则直接将命令写回 旧的日志文件 ，并且保存一份命令至 AOF重写缓冲区 ，这些操作对新的日志文件是不存在影响的。而在 bgrewriteaof 子进程完成会日志文件的重写操作后，会提示主线程已经完成重写操作，主线程会将 AOF 重写缓冲中的命令追加到新的日志文件后面。Redis 通过创建一个新的 AOF 文件来替换现有的 AOF，新旧两个 AOF 文件保存的数据相同，但新 AOF 文件没有了冗余命令。1、fork 子进程时，需要拷贝虚拟页表，会对主线程阻塞。
【学习笔记】Redis-AOF日志重写的机制
weixin_47936134的博客
06-04 810
AOF（Append Only File）日志重写是Redis中一种优化持久化文件大小和提高数据恢复效率的机制。
Redis的AOF重写机制
yjc0403的博客
12-05 650
Redis的AOF重写机制   1. 重写AOF的时候，创建一个重写子进程，然后读取旧的AOF文件，压缩并写入到一个临时AOF。 2. 在此期间，主进程一边将接收到的指令累计到一个缓冲区中，一边将指令写入到旧的AOF。 （这样的好处，保证AOF文件的可用性，避免写过程时出意外） 3. 子进程写完后，向主进程发送一个信号量，主进程就将缓冲区中的指令追加到新AOF。 4. 用新的AOF替...
redis持久化----AOF重写
06-07
为了解决这个问题，Redis提供了AOF重写机制。 AOF重写机制会生成一个新的AOF文件，这个文件只包含当前Redis服务器中的数据库状态。AOF重写的过程是通过读取内存中的数据库状态，然后用一系列的Redis命令来重建一个...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值