从零开始 Spring Cloud 14:高可用 Redis

本文详细介绍了Spring Cloud中实现高可用Redis的方法,包括RDB和AOF持久化、主从复制、哨兵机制以及分片集群的搭建。重点讲解了RDB的执行时机、AOF文件重写,以及主从数据同步的全量和增量同步原理。同时,探讨了RedisTemplate在主从和哨兵集群中的应用,展示了如何实现读写分离和故障转移。
摘要由CSDN通过智能技术生成

从零开始 Spring Cloud 14:高可用 Redis

1.持久化

为了演示,先在虚拟机上安装 Redis,具体可以参考这篇文章

1.1.RDB

RDB全称Redis Database Backup file(Redis数据备份文件),也被叫做Redis数据快照。简单来说就是把内存中的所有数据都记录到磁盘中。当Redis实例故障重启后,从磁盘读取快照文件,恢复数据。快照文件称为RDB文件,默认是保存在当前运行目录。

1.1.1.执行时机

RDB持久化在四种情况下会执行:

  • 执行save命令
  • 执行bgsave命令
  • Redis停机时
  • 触发RDB条件时

在 Redis 客户端执行 save 命令,会立即进行一次 RDB 备份:

[icexmoon@192 ~]$ redis-cli
127.0.0.1:6379> ping
PONG
127.0.0.1:6379> save
OK

save 命令备份使用的是 Redis 的主线程,此时主线程是阻塞的,不能处理其他请求。

在 Redis 客户端执行 bgsave 命令同样会进行 RDB 备份:

127.0.0.1:6379> bgsave
Background saving started

与 save 命令不同的是,bgsave 是 Redis 的主进程 fork 出一个子进程来执行备份工作,子进程产生后主进程不会处于阻塞状态,依然可以处理请求。

Redis 关闭时同样会执行 RDB 备份:

...295 # User requested shutdown...
...295 * Saving the final RDB snapshot before exiting.
...296 * DB saved on disk
...296 * Removing the pid file.
...297 # Redis is now ready to exit, bye bye...

输出中明确说明了在退出前保存了 RDB 快照。

为了确保在某些非正常停机时也能够保存 RDB 快照,Redis 还支持在特定时间内满足条件就自动保存快照的功能。条件可以在 Redis 配置文件 redis.conf 中进行设置:

# 900秒内,如果至少有1个key被修改,则执行bgsave , 如果是save "" 则表示禁用RDB
save 900 1  
save 300 10  
save 60 10000 

RDB的其它配置也可以在redis.conf文件中设置:

# 是否压缩 ,建议不开启,压缩也会消耗cpu,磁盘的话不值钱
rdbcompression yes

# RDB文件名称
dbfilename dump.rdb  

# 文件保存的路径目录
dir ./ 

1.1.2.原理

bgsave开始时会fork主进程得到子进程,子进程共享主进程的内存数据。完成fork后读取内存数据并写入 RDB 文件。

fork采用的是copy-on-write技术:

  • 当主进程执行读操作时,访问共享内存;
  • 当主进程执行写操作时,则会拷贝一份数据,执行写操作。

image-20210725151319695

1.1.3.小结

RDB方式bgsave的基本流程

  • fork主进程得到一个子进程,共享内存空间
  • 子进程读取内存数据并写入新的RDB文件
  • 用新RDB文件替换旧的RDB文件

RDB的缺点

  • RDB执行间隔时间长,两次RDB之间写入数据有丢失的风险
  • fork子进程、压缩、写出RDB文件都比较耗时

1.2.AOF

AOF全称为Append Only File(追加文件)。Redis处理的每一个写命令都会记录在AOF文件,可以看做是命令日志文件。

image-20210725151543640

1.2.1.AOF 配置

AOF默认是关闭的,需要修改redis.conf配置文件来开启AOF:

# 是否开启AOF功能,默认是no
appendonly yes
# AOF文件的名称
appendfilename "appendonly.aof"

AOF的命令记录的频率也可以通过redis.conf文件来配:

# 表示每执行一次写命令,立即记录到AOF文件
appendfsync always 
# 写命令执行完先放入AOF缓冲区,然后表示每隔1秒将缓冲区数据写到AOF文件,是默认方案
appendfsync everysec 
# 写命令执行完先放入AOF缓冲区,由操作系统决定何时将缓冲区内容写回磁盘
appendfsync no

三种策略对比:

image-20210725151654046

一般推荐使用appendfsync everysec

1.2.2.实际演示

为了演示 AOF 备份的功能,先关闭 RDB备份:

save ""
#save 3600 1
#save 300 100
#save 60 10000

删除 RDB 备份文件:

[root@192 redis-6.2.4]# rm *.rdb
rm:是否删除普通文件 'dump.rdb'?y

重启 Redis 服务端,并写入一些 key-value:

127.0.0.1:6379> keys *
(empty array)
127.0.0.1:6379> set num 123
OK
127.0.0.1:6379> set name icexmoon
OK

1秒后,会生成一个 AOF 文件:

[icexmoon@192 redis-6.2.4]$ ls *.aof
appendonly.aof
[icexmoon@192 redis-6.2.4]$ cat appendonly.aof
*2
$6
SELECT
$1
0
*3
$3
set
$3
num
$3
123
*3
$3
set
$4
name
$8
icexmoon

这个 AOF 文件会记录所有在 Redis 服务端上执行过的操作,$3表示下面的命令有3个字符长度。

关闭 Redis 服务端,可以看到:

...559 # User requested shutdown...
...559 * Calling fsync() on the AOF file.

说明在退出时也会确保 AOF 还没有记录的操作从缓冲区全部写入 AOF 文件。

相应的,在 Redis 服务端再次启动后,会输出:

591 * DB loaded from append only file: 0.000 seconds

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值