从零开始 Spring Cloud 14:高可用 Redis
1.持久化
为了演示,先在虚拟机上安装 Redis,具体可以参考这篇文章。
1.1.RDB
RDB全称Redis Database Backup file(Redis数据备份文件),也被叫做Redis数据快照。简单来说就是把内存中的所有数据都记录到磁盘中。当Redis实例故障重启后,从磁盘读取快照文件,恢复数据。快照文件称为RDB文件,默认是保存在当前运行目录。
1.1.1.执行时机
RDB持久化在四种情况下会执行:
- 执行save命令
- 执行bgsave命令
- Redis停机时
- 触发RDB条件时
在 Redis 客户端执行 save 命令,会立即进行一次 RDB 备份:
[icexmoon@192 ~]$ redis-cli
127.0.0.1:6379> ping
PONG
127.0.0.1:6379> save
OK
save 命令备份使用的是 Redis 的主线程,此时主线程是阻塞的,不能处理其他请求。
在 Redis 客户端执行 bgsave 命令同样会进行 RDB 备份:
127.0.0.1:6379> bgsave
Background saving started
与 save 命令不同的是,bgsave 是 Redis 的主进程 fork 出一个子进程来执行备份工作,子进程产生后主进程不会处于阻塞状态,依然可以处理请求。
Redis 关闭时同样会执行 RDB 备份:
...295 # User requested shutdown...
...295 * Saving the final RDB snapshot before exiting.
...296 * DB saved on disk
...296 * Removing the pid file.
...297 # Redis is now ready to exit, bye bye...
输出中明确说明了在退出前保存了 RDB 快照。
为了确保在某些非正常停机时也能够保存 RDB 快照,Redis 还支持在特定时间内满足条件就自动保存快照的功能。条件可以在 Redis 配置文件 redis.conf 中进行设置:
# 900秒内,如果至少有1个key被修改,则执行bgsave , 如果是save "" 则表示禁用RDB
save 900 1
save 300 10
save 60 10000
RDB的其它配置也可以在redis.conf文件中设置:
# 是否压缩 ,建议不开启,压缩也会消耗cpu,磁盘的话不值钱
rdbcompression yes
# RDB文件名称
dbfilename dump.rdb
# 文件保存的路径目录
dir ./
1.1.2.原理
bgsave开始时会fork主进程得到子进程,子进程共享主进程的内存数据。完成fork后读取内存数据并写入 RDB 文件。
fork采用的是copy-on-write技术:
- 当主进程执行读操作时,访问共享内存;
- 当主进程执行写操作时,则会拷贝一份数据,执行写操作。
1.1.3.小结
RDB方式bgsave的基本流程
- fork主进程得到一个子进程,共享内存空间
- 子进程读取内存数据并写入新的RDB文件
- 用新RDB文件替换旧的RDB文件
RDB的缺点
- RDB执行间隔时间长,两次RDB之间写入数据有丢失的风险
- fork子进程、压缩、写出RDB文件都比较耗时
1.2.AOF
AOF全称为Append Only File(追加文件)。Redis处理的每一个写命令都会记录在AOF文件,可以看做是命令日志文件。
1.2.1.AOF 配置
AOF默认是关闭的,需要修改redis.conf配置文件来开启AOF:
# 是否开启AOF功能,默认是no
appendonly yes
# AOF文件的名称
appendfilename "appendonly.aof"
AOF的命令记录的频率也可以通过redis.conf文件来配:
# 表示每执行一次写命令,立即记录到AOF文件
appendfsync always
# 写命令执行完先放入AOF缓冲区,然后表示每隔1秒将缓冲区数据写到AOF文件,是默认方案
appendfsync everysec
# 写命令执行完先放入AOF缓冲区,由操作系统决定何时将缓冲区内容写回磁盘
appendfsync no
三种策略对比:
一般推荐使用appendfsync everysec
1.2.2.实际演示
为了演示 AOF 备份的功能,先关闭 RDB备份:
save ""
#save 3600 1
#save 300 100
#save 60 10000
删除 RDB 备份文件:
[root@192 redis-6.2.4]# rm *.rdb
rm:是否删除普通文件 'dump.rdb'?y
重启 Redis 服务端,并写入一些 key-value:
127.0.0.1:6379> keys *
(empty array)
127.0.0.1:6379> set num 123
OK
127.0.0.1:6379> set name icexmoon
OK
1秒后,会生成一个 AOF 文件:
[icexmoon@192 redis-6.2.4]$ ls *.aof
appendonly.aof
[icexmoon@192 redis-6.2.4]$ cat appendonly.aof
*2
$6
SELECT
$1
0
*3
$3
set
$3
num
$3
123
*3
$3
set
$4
name
$8
icexmoon
这个 AOF 文件会记录所有在 Redis 服务端上执行过的操作,$3
表示下面的命令有3个字符长度。
关闭 Redis 服务端,可以看到:
...559 # User requested shutdown...
...559 * Calling fsync() on the AOF file.
说明在退出时也会确保 AOF 还没有记录的操作从缓冲区全部写入 AOF 文件。
相应的,在 Redis 服务端再次启动后,会输出:
591 * DB loaded from append only file: 0.000 seconds
这