redis学习3：redis持久化

目录

持久化

RDB

配置

实现

优点

缺点

AOF

配置

实现

AOF重写机制

优点

缺点

 小结

---

持久化

持久化可以理解为存储，就是将数据存储到一个不会丢失的地方，如果把数据放在内存中，电脑关闭或者重启数据就会丢失，所以放在内存中的数据不是持久化的，而放在硬盘中算是一种持久化

redis的数据存储在内存中，内存是瞬时的，如果linux泵机或重启，又或者redis奔溃或者重启，所有的内存数据都会丢失，为了解决这个问题，redis提供了RDB和AOF这两种机制对数据进行持久化存储，便于发生故障后能迅速恢复数据。

RDB

redis database，就是在指定的时间间隔内将内存中的数据集快照写入磁盘，数据恢复时将快照文件直接再读到内存

配置

在redis.conf文件中进行配置，配置格式 ： save <seconds> <changes>

save 900 1	在900秒(15分钟)之后，如果至少有1个key发生变化，则dump内存快照。
save 300 10	在300秒(5分钟)之后，如果至少有10个key发生变化，则dump内存快照
save 60 10000	在60秒(1分钟)之后，如果至少有10000个key发生变化，则dump内存快照。

配置文件redis.conf中搜索SNAPSHOTTING，可以设置两个参数

dbfilename: 设置RDB的文件名，默认文件名为dump.rdb

dir:指定RDB和AOF文件的目录

实现

RDB持久化是指在指定的时间间隔内将内存中的数据集快照写入磁盘，实际操作过程是fork一个子进程，先将数据集写入临时文件，写入成功后，再替换之前的文件，用二进制压缩存储。

优点

• 一旦采用该方式，那么你的整个Redis数据库将只包含一个文件，这对于文件备份而言是非常完美的。比如，你可能打算每个小时归档一次最近24小时的数据，同时还要每天归档一次最近30天的数据。通过这样的备份策略，一旦系统出现灾难性故障，我们可以非常容易的进行恢复。
•  对于灾难恢复而言，RDB是非常不错的选择。因为我们可以非常轻松的将一个单独的文件压缩后再转移到其它存储介质上。
• 性能最大化。对于Redis的服务进程而言，在开始持久化时，它唯一需要做的只是fork出子进程，之后再由子进程完成这些持久化的工作，这样就可以极大的避免服务进程执行IO操作了。
• 相比于AOF机制，如果数据集很大，RDB的启动效率会更高。

缺点

• 如果你想保证数据的高可用性，即最大限度的避免数据丢失，那么RDB将不是一个很好的选择。因为系统一旦在定时持久化之前出现宕机现象，此前没有来得及写入磁盘的数据都将丢失。
• 由于RDB是通过fork子进程来协助完成数据持久化工作的，因此，如果当数据集较大时，可能会导致整个服务器停止服务几百毫秒，甚至是1秒钟。

AOF

Append-only File，redis每次接收到一条改变数据的命令时，它将把该命令写到一个AOF文件中（只记录写操作，读操作不记录），当redis重启时，它通过执行AOF文件中的所有命令来恢复数据

配置

最主要的是appendfsync配置，指定同步方式，有如下三种同步方式

appendfsync always	每次有数据写入都会执行同步，慢一些但是比较安全
appendfsync everysec	每秒执行一次同步操作，比较平衡，介于速度和安全之间
appendfsync no	不主动进行同步操作，而是完全交由操作系统来做（每隔30s一次），快但是不安全

其他配置

• appendonly:默认是no,改成yes即开启了aof持久化
• appendfilename:指定AOF文件名，默认文件名是appendonly.aof
• dir:指定AOF和RDB文件的目录

实现

AOF持久化以日志的形式记录服务器所处理的每一个写、删除操作，查询操作不会记录，以文本的方式记录，可以打开文件看到详细的操作记录。

AOF重写机制

前面也说到了，AOF的工作原理是将写操作追加到文件中，文件的冗余内容会越来越多。所以聪明的 Redis 新增了重写机制。当AOF文件的大小超过所设定的阈值时，Redis就会对AOF文件的内容压缩。

重写的原理：Redis 会fork出一条新进程，读取内存中的数据，并重新写到一个临时文件中。并没有读取旧文件（你都那么大了，我还去读你？？？ o(ﾟДﾟ)っ傻啊！）。最后替换旧的aof文件。

触发机制：当AOF文件大小是上次rewrite后大小的一倍且文件大于64M时触发。这里的“一倍”和“64M” 可以通过配置文件修改。 

auto-aof-rewrite-percentage 100 当前AOF文件大小超过上一次重写时的aof文件大小的多少时会再次进行重写，如果之前没有重写，则以启动时的AOF文件大小为依据
auto-aof-rewrite-min-size 64mb 允许重写的最小AOF文件大小

优点

• 该机制可以带来更高的数据安全性，即数据持久性。Redis中提供了3中同步策略，即每秒同步、每修改同步和不同步。事实上，每秒同步也是异步完成的，其效率也是非常高的，所差的是一旦系统出现宕机现象，那么这一秒钟之内修改的数据将会丢失。而每修改同步，我们可以将其视为同步持久化，即每次发生的数据变化都会被立即记录到磁盘中。可以预见，这种方式在效率上是最低的。至于无同步，无需多言，我想大家都能正确的理解它。
• 由于该机制对日志文件的写入操作采用的是append模式，因此在写入过程中即使出现宕机现象，也不会破坏日志文件中已经存在的内容。然而如果我们本次操作只是写入了一半数据就出现了系统崩溃问题，不用担心，在Redis下一次启动之前，我们可以通过redis-check-aof工具来帮助我们解决数据一致性的问题。
• 如果日志过大，Redis可以自动启用rewrite机制。即Redis以append模式不断的将修改数据写入到老的磁盘文件中，同时Redis还会创建一个新的文件用于记录此期间有哪些修改命令被执行。因此在进行rewrite切换时可以更好的保证数据安全性。
•  AOF包含一个格式清晰、易于理解的日志文件用于记录所有的修改操作。事实上，我们也可以通过该文件完成数据的重建。

缺点

•  对于相同数量的数据集而言，AOF文件通常要大于RDB文件。RDB 在恢复大数据集时的速度比 AOF 的恢复速度要快。
• 根据同步策略的不同，AOF在运行效率上往往会慢于RDB。总之，每秒同步策略的效率是比较高的，同步禁用策略的效率和RDB一样高效。

 小结

1. Redis 默认开启RDB持久化方式，在指定的时间间隔内，执行指定次数的写操作，则将内存中的数据写入到磁盘中。
2. RDB 持久化适合大规模的数据恢复但它的数据一致性和完整性较差。
3. Redis 需要手动开启AOF持久化方式，默认是每秒将写操作日志追加到AOF文件中。
4. AOF 的数据完整性比RDB高，但记录内容多了，会影响数据恢复的效率。
5. Redis 针对 AOF文件大的问题，提供重写的瘦身机制。
6. 若只打算用Redis 做缓存，可以关闭持久化。
7. 若打算使用Redis 的持久化。建议RDB和AOF都开启。其实RDB更适合做数据的备份，留一后手。AOF出问题了，还有RDB。