一,Redis主从配置
Redis高可用集群中,主节点的无需做什么集群配置,只需在从节点中开启主节点配置
replicaof ip port
如同传统的数据库集群一样,Redis集群一样采用了主写从读的结构,从而达到读写分离的作用
<一主多从,主从同步,主负责写,从负责读,提升Redis的性能和吞吐量,主从的数据一致性问题>
因为Redis是内存数据库,主从架构还能有效的防止容灾的发生:从机是主机的备份,主机宕机,从机可读不可写,默认情况下主机宕机后,从机不可为主机,利用哨兵可以实现主从切换,做到高可用
二,Redis主从复制原理
上面有提到过了从节点的配置,通过配置replicaof将主节点的ip,port存入到从节点的服务器当中。
主从复制流程:
- 从保存主节点信息为开始,从服务器将向发送SLAVEOF命令的客户端返回OK,表示复制指令已经被接收,而实际上复制工作是在OK返回之后进行。
- 主从服务器之间的连接没有什么特别的方式,就是传统的套接字连接方式。Master与Slave通过Socket建立连接,slave关联文件事件处理器。主服务器accept从服务器,Socket连接后,创建相应的客户端状态。相当于从服务器是主服务器的Client 端。
- PING-PONG,Slave开始向Master发送Ping命令,确定Master的状态信息(socket连接是否可以读写?是否可以正常处理),Master向从服务器发送pong命令说明master状态正常,如果不正常返回错误信息,或者超时不返回。
- 权限验证,到这了位置,主从连接已经建立完成,然后如果有权限配置则验证权限,主节点如果有设置requirepass,那么从节点则需要通过auth命令向主节点发送masterauth,要求和主节点配置密码一致。
- 身份验证完成后,从服务器就需要将自己的端口号发送给主服务器,通过命令REPLCONF listening-port port 发送端口号到主服务器进行注册。
- 同步数据
- 命令传播,当同步数据完成后,主从服务器就会进入命令传播阶段,主服务器只要将自己执行的写命令发送给从服 务器,而从服务器只要一直执行并接收主服务器发来的写命令。
同步数据集流程:
- 同步操作,首先从服务器向主机发送PSYNC命令,同步的过程分为全量同步与增量同步两种模式,全量同步只在主从数据同步第一次同步时进行。但是如果在同步的过程中,从服务器节点宕机或者主节点宕机,在重启之后,同步的过程中也有可能出现全量同步也有可能出现增量同步,除这些场景以外的同步都是增量同步。
- 全量同步,Redis的全量同步并不是一步走完的,首先会先对历史数据进行快照,master将快照RDB文件发送给Slave解析,在这个过程中,对于Master新写入的数据,会将写的命令存入到缓冲区,这个过程也称为同步快照阶段;等Slave快照文件解析完成后,master则开始向Slave同步缓冲区的写命令,这个阶段称为同步写缓冲阶段;然后后续则进行增量同步
- 增量同步,通常情况下,Master 每执行一个写命令就会向 Slave 发送相同的写命令,然后 Slave 接收并执行。
三,Redis主从心跳检测
心跳配置: replconf ack replication_offset;
#ack :应答
#replication_offset:从服务器当前的复制偏移量
心跳检测的作用:
1. 检测主从的连接状态(包括网络连接状态,连接的读写)
2. 辅助实现min-slaves,例:从服务器的数量少于3个,或者三个从服务器的延迟(lag)值都大于或等于10 秒时,主服务器将拒绝执行写命令。这里的延迟值就是INFOreplication命令的lag值。
3.检测命令丢失,如果因为网络故障,主服务器传播给从服务器的写命令在半路丢失,那么当从服务器向主服务器发 送REPLCONF ACK命令时,主服务器将发觉从服务器当前的复制偏移量少于自己的复制偏移量, 然后主服务器就会根据从服务器提交的复制偏移量,在复制积压缓冲区里面找到从服务器缺少的数 据,并将这些数据重新发送给从服务器。(补发)