一简介
单节点Redist的并发能力是有上限的,要进一步提高Redis的并发能力,就需要搭建主从集群,实现读写分离。
master如何判断slave是不是第一次来同步数据?这里会用到两个很重要的概念:
Replication Id:简称replid,是数据集的标记,id一致则说明是同一数据集。每一个master都有唯一的replid,
slave则会继承master节点的replid
offset:偏移量,随着记录在repl_baklog中的数据增多而逐渐增大。slave完成同步时也会记录当前同步的offset。
如果slavel的offset/小于master的offset,说明slave数据落后于master,需要更新。
因此slave做数据同步,必须向masteri声明自己的replication id和offset,master才可以判断到底需要同步哪些数据
全量同步的过程
1.slave节点请求增量同步
2.master节点判断replid,发现不一致,拒绝增量同步
3.master将完整内存数据生成RDB,发送RDB到slave
4.slave清空本地数据,加载master的RDB
5.master将RDB期间的命令记录在repl_baklog,并持续将log中的命令发送给slave
6.slave执行接收到的命令,保持与master之间的同步
增量同步的过程
1.从节点重启后去主节点
2.判断reolid是否一致
3.如果不是第一次就继续按照上一次的offset的位置向后执行
优化(减少全量同步)
1.在master中配置repl-diskless-sync yes启用无磁盘复制,避免全量同步时的磁盘IO。
2.Redis.单节点上的内存占用不要太大,减少RDB导致的过多磁盘IO
3.适当提高repl baklog的大小,发现slave宕机时尽快实现故障恢复,尽可能避免全量同步
4.限制一个master.上的slave节点数量,如果实在是太多slave,则可以采用主-从-从链式结构,减少master压力