【Redis】复制

复制

在Redis中，用户可以通过执行SLAVEOF命令或者设置slaveof选项，让一个服务器去复制另一个服务器，我们称呼被复制的服务器为主服务器，而对主服务器进行复制的服务器则被称为从服务器

 

旧版复制功能的实现

Redis复制功能分为同步和命令传播两个操作

同步

将从服务器的数据库状态更新至主服务器当前所处的数据库状态

SYNC执行步骤

1. 从服务器向主服务器发送SYNC命令
2. 收到SYNC命令的主服务器执行BGSAVE命令，在后台生成一个RDB文件，并使用一个缓冲区记录从现在开始执行的所有写命令
3. 当主服务器的BGSAVE命令执行完毕时，主服务器会将BGSAVE命令生成的RDB文件发送给从服务器，从服务器接受并载入RDB文件，将自己的数据库状态更新至主服务器执行BGSAVE命令时的数据库状态
4. 主服务器将记录在缓冲区里面的所有写命令发送给从服务器，从服务器执行这些写命令，将自己的数据库状态更新至主服务器数据库当前所处的状态

命令传播

为了让主从服务器再次回到一致状态，主服务器需要对从服务器执行命令传播操作：主服务器会将自己执行的写命令，也即是造成主从服务器不一致的那条写命令，发送给从服务器执行，当从服务器执行了相同的写命令后，主从服务器将再次回到一致状态，

旧版复制功能的缺陷

旧版复制功能虽然也能让主从服务器重新回到一致状态，但效率非常低，因为其让服务器为了补足一小部分缺失数据，却让主从服务器重新执行一次SYNC命令。

新版复制功能的实现

完整重同步：完整重同步的执行步骤和SYNC命令的执行步骤一样，都是通过让主服务器创建并发送RDB文件，以及向从服务器发送保存在缓冲区里面的写命令来进行同步

部分重同步：当从服务器在断线后重新连接主服务器时，如果条件允许，主服务器可以将主从服务器连接断开期间执行的写命令发送给从服务器，从服务器只要接收并执行这些写命令，就可以将数据库更新至主服务器当前所处的状态

 

部分重同步的实现

复制偏移量

1. 主服务器每次向从服务器传播N个字节的数据时，就将自己的复制偏移量的值加上N
2. 从服务器每次收到主服务器传播来的N个字节的数据时，就将自己的复制偏移量的值加上N

通过对比主从服务器的复制偏移量，程序可以很容易的知道主从服务器是否处于一致状态：

1. 如果主从服务器处于一致状态，那么主从服务器的两者的偏移量总是相同的
2. 相反，如果主从服务器两者的偏移量并不相同，那么说明主从服务器并未处于一致状态

复制积压缓冲区

复制积压缓冲区是由主服务器维护的一个固定长度先进先出(FIFO)队列，默认大小为1MB

当主服务器进行命令传播时，它不仅会将写命令发送给所有从服务器，还会将写命令入队到复制积压缓冲区里面。

主服务器的复制积压缓冲区里面会保存着一部分最近传播的写命令，并且复制积压缓冲区会为队列中的每个字节记录相应的复制偏移量

 

1. 如果offset偏移量之后的数据(也即是偏移量offset+1开始的数据)仍然存在于复制积压缓冲区里面，那么主服务器将对从服务器执行部分重同步操作
2. 相反，如果offset偏移量之后的数据已经不存在于复制积压缓冲区，那么主服务器将对从服务器执行完整重同步操作

服务器运行ID

1. 每个Redis服务器，不论主服务器还是从服务器，都会有自己的运行ID
2. 运行ID在服务器启动时自动生成，由40个随机的十六进制字符组成

当从服务器对主服务器进行初次复制时，主服务器会将自己的运行ID传送给从服务器，而从服务器则会将这个运行ID保存起来

当从服务器断线并重新连上一个主服务器时，从服务器将向当前连接的主服务器发送之前保存的运行ID

1. 如果从服务器保存的运行ID和当前连接的主服务器的运行ID相同，那么说明从服务器断线之前复制的就是当前连接的这个主服务器，主服务器可以继续尝试执行部分重同步操作
2. 相反，如果从服务器保存的运行ID和当前连接的主服务器的运行ID并不相同，那么说明从服务器断线之前复制的主服务器并不是当前连接的这个主服务器，主服务器将对从服务器执行完整重同步操作

PSYNC命令的实现

 

复制的实现

步骤1：设置主服务器的地址和端口

从服务器首先要做的就是将客户端给定的主服务器IP地址以及端口号保存到服务器状态的masterhost属性和masterport属性里面

 

 

步骤2：建立套接字连接

从服务器将根据命令所设置的IP地址和端口，创建连向主服务器的套接字连接

 

步骤3：发送PING命令

发送PING由两个作用：

1. 虽然主从服务器成功建立起了套接字连接，但双方并未使用该套接字进行过任何通信，通过发送PING命令可以检查套接字的读写状态是否正常
2. 通过发送PING可以检查主服务器能否正常处理命令请求

 

步骤4：身份验证

如果从服务器设置了masterauth选项，那么进行身份验证，否则不进行身份验证

 

步骤5：发送端口信息

步骤6：同步

从服务器向主服务器发送PSYNC命令，执行同步操作，并将自己的数据库更新至主服务器数据库当前所处的状态

步骤7：命令传播

心跳检测

在命令传播阶段，从服务器默认会以每秒一次的频率，向主服务器发送命令：

 

其中replication_offset是从服务器当前的复制偏移量

发送REPLCONF ACK命令对于主从服务器有三个作用：

1. 检测主从服务器的网络连接状态
2. 辅助实现min-salves选项
3. 检测命令丢失

主服务器通过向从服务器传播命令来更新从服务器的状态，保持主从服务器的一致，而从服务器则通过向主服务器发送命令来进行心跳检测，以及命令丢失检测。