主从服务器的复制机制——《Redis设计与实现》

主从服务器的复制机制

 完全重同步用于初次复制情况：接收到psync命令后执行BGSAVE命令，在后台生成一个RDB文件，并使用一个缓存区记录从现在开始执行的所有写命令；RDB文件生成完毕后发送给从服务器，从服务器接收并载入RDB文件，将自己的服务器状态更新至主服务器执行BGSAVE命令时的数据库状态，再执行接收的主服务器缓冲区中的写命令。

部分重同步则用于处理断线后重复制情况：部分重同步功能由主从服务器的复制偏移量、主服务器的复制积压缓冲区、服务器的运行ID(run ID)三部分构成；

主从服务器的复制偏移量：主服务器每次向从服务器传播N个字节的数据时，自己的复制偏移量的值会加上N，从服务器每次收到主服务器传播了的N个字节的数据时，自己的复制偏移量会加上N，如果主从服务器处于一致状态，则主从服务器的复制偏移量是相同的，反之，如果主从服务器的复制偏移量不相同，则主从服务器的未处于一致状态；

复制积压缓冲区：主服务器维护的一个固定长度先进先出队列。默认大小为1MB。主服务器不仅会将写命令发送给从服务器，还会将写命令入队到复制积压缓冲区中，并为队列中的每个字节记录相应的复制偏移量；从服务器通过PSYNC命令将自己的复制偏移量offset发送给主服务器，如果offset偏移量之后的数据仍然存在于复制积压缓冲区中，那么主服务器将对从服务器执行部分重同步操作；反之则进行完全同步操作；复制挤压缓冲区的大小：2*seconds*write_size_per_second; seconds是从服务器断线后重新连接上主服务器所需的平均时间，write_size_per_second是主服务器平均每秒产生的写命令数据量(协议格式的写命令的长度总和)；

服务器运行ID:从服务器对主服务器进行初次复制时，从服务器会保存主服务器传送的运行ID，当从服务器断线重连后，将保存的主服务器的运行ID发送给当前连接的主服务器，用于判断运行ID是否相同，相同时主服务器可以尝试执行部分重同步操作，不同时则直接执行完整重同步操作。

 第三步，发送PING命令后有如下几种情况：如果主服务器向从服务器返回了一个命令回复，但从服务器却不能在规定的时限（timeout）内读取出命令回复的内容，那么表示主从服务器之间的网络连接状态不佳，不能继续执行复制工作的后续步骤。当出现这种情况时，从服务器断开并重新创建连向主服务器的套接字。如果主服务器向从服务器返回一个错误，那么表示主服务器暂时没办法处理从服务器的命令请求，不能继续执行复制工作的后续步骤。当出现这种情况时，从服务器断开并重新创建连向主服务器的套接字。比如说，如果主服务器正在处理一个超时运行的脚本，那么当从服务器向主服务器发送PING命令时，从服务器将收到主服务器返回的BUSY Redisis busy running a script.You can only call SCRIPT KILL or SHUTDOWN NOSAVE.错误。如果从服务器读取到"PONG"回复，那么表示主从服务器之间的网络连接状态正常，并且主服务器可以正常处理从服务器（客户端）发送的命令请求，在这种情况下，从服务器可以继续执行复制工作的下个步骤。

第四步，身份验证有如下几种情况：如果主服务器没有设置requirepass选项，并且从服务器也没有设置masterauth选项，那么主服务器将继续执行从服务器发送的命令，复制工作可以继续进行。如果从服务器通过AUTH命令发送的密码和主服务器requirepass选项所设置的密码相同，那么主服务器将继续执行从服务器发送的命令，复制工作可以继续进行。与此相反，如果主从服务器设置的密码不相同，那么主服务器将返回一个invalid password错误。如果主服务器设置了requirepass选项，但从服务器却没有设置masterauth选项，那么主服务器将返回一个NOAUTH错误。另一方面，如果主服务器没有设置requirepass选项，但从服务器却设置了masterauth选项，那么主服务器将返回一个no。

心跳检测：命令传播阶段，从服务器默认以每秒一次的频率向主服务器发送REPLCONF ACK <replication_offset>命令，其中relication_offset是从服务器当前的复制偏移量。发送REPLCONF ACK命令对于主从服务器有三个作用：检测主从服务器的网络连接状态、辅助实现min-slaves选项、检测命令丢失。通过向主服务器发送INFO replication命令，在列出的从服务器列表的lag一栏中，可以看到相应的从服务器最后一次向主服务器发送命令距离现在过了多少秒，一般情况下，lag的值应该在0秒或者1秒之间跳动，如果超过1秒的话，那么说明主从服务器之间的连接出现了故障；Redis的min-slaves-to-write和min-slaves-max-lag两个选项可以防止主服务器在不安全的情况下执行写命令，例如min-slaves-to-write 3  min-slaves-max-lag 10就表示从服务器的数量少于3个，或者三个从服务器的延迟(lag)都大于等于10秒时，主服务器将拒绝执行写命令；当从服务器向主服务器发送命令时，主从服务器的复制偏移量不一致，则主服务器会向从服务器补发缺失的数据。

                                                                          

                                                       分享学习历程，坚持一周一篇原创，欢迎一起关注学习

                                                                           我现在坚持一定会有收获