Redis主从架构

系列文章目录

第一节 Redis的安装
第二节 Redis的五种数据结构（String、Hash、List、Set、ZSet）
第三节 Redis的持久化方式

---

---

前言

本节整理一下Redis的主从架构相关内容

---

一、主从架构图

可用来做主从复制，slave节点从master节点同步数据；也可用来做读写分离，master节点处理写，slave节点处理读

二、主从架构搭建

1.配置master节点

master节点安装可参考第一节 Redis安装的内容

2.配置slave节点

这里主要介绍slave节点的配置方法

1、复制一份redis.conf文件
cp redis.conf redis-6380.conf

2、按下面注释，将相关配置修改为如下值：
vi redis-6380.conf

port 6380      #修改实际端口号为6380
pidfile /var/run/redis_6380.pid  # 把pid进程号写入pidfile配置的文件，每个端口一个pid文件
logfile "6380.log"  #每个端口一个log文件
dir ./data/6380  # 指定数据存放目录,需要手动创建，给每个端口创建一个文件夹存放
# 需要注释掉bind
# bind 127.0.0.1（bind绑定的是自己机器网卡的ip，如果有多块网卡可以配多个ip，代表允许客户端通过机器的哪些网卡ip去访问，内网一般可以不配置bind，注释掉即可）

配置主从复制
replicaof 192.168.0.60 6379   # 从本机6379的redis实例复制数据，Redis 5.0之前使用slaveof
replica-read-only yes  # 配置从节点只读
#masterauth 123456 #如果主节点6379开启了密码校验，则从节点需要配置（转为哨兵架构后，主节点也得配置该配置项，已踩坑！！！）

3、启动从节点
src/redis-server redis-6380.conf

4、连接从节点
redis-cli -p 6380

5、测试在6379实例上写数据，6380实例是否能及时同步新修改数据

6379写数据

6380读数据

6、重复以上的步骤，可以再配置一个6381的从节点
cp redis-6380.conf redis-6381.conf
vi redis-6381.conf
..........
mkdir -p data/6381
src/redis-server redis-6381.conf
......

三、主从工作原理

数据全量复制

1、为master配置了一个slave后，slave会与master建立socket长连接，并发送一个PSYNC命令给master请求复制数据。
2、master收到PSYNC命令后，会在后台进行数据持久化通过bgsave生成最新的rdb快照数据，持久化期间，master会继续接收客户端的请求，它会把这些可能修改数据集的请求缓存在内存中。
3、当持久化进行完毕以后，master会把这份rdb文件数据集发送给slave。
4、slave会把接收到的数据进行持久化生成rdb，然后再加载到内存中。
5、master再将之前缓存在内存中的命令发送给slave，然后再加载到内存中。
6、当master与slave之间的连接由于某些原因而断开时，slave能够自动重连Master，如果master收到了多个slave并发连接请求，它只会进行一次持久化，而不是一个连接一次，然后再把这一份持久化的数据发送给多个并发连接的slave。

数据部分复制

1、当master和slave断开重连后，一般都会对整份数据进行复制。
2、但从redis2.8版本开始，redis改用可以支持部分数据复制的命令PSYNC去master同步数据，slave与master能够在网络连接断开重连后只进行部分数据复制(断点续传)。
3、master会在其内存中创建一个复制数据用的缓存队列，缓存最近一段时间的数据，master和它所有的slave都维护了复制的数据下标offset和master的进程id，因此，当网络连接断开后，slave会请求master继续进行未完成的复制，从所记录的数据下标开始。如果master进程id变化了，或者从节点数据下标offset太旧，已经不在master的缓存队列里了，那么将会进行一次全量数据的复制。

四、什么是主从复制风暴？

如果有多个从节点同时复制主节点会导致主节点压力过大，因为每个slave节点都会和master建立长连接并同步数据，所以会导致master节点压力过大，如下图所示。

可以做如下架构，让部分从节点与从节点同步数据，可以缓解上述的问题：

总结

以上就是今天要讲的内容，介绍redis的主从架构搭建、主从数据同步原理等内容，下一节将介绍哨兵模式。