Redis4.0 PSYNC2介绍

文章系转载,便于整理和归纳
作者:白馨_1114
链接:https://www.jianshu.com/p/59fe1eec0c36
来源:简书

PSYNC

PSYNC是Redis 4.0版本之前的主从同步协议。

PSYNC协议中,主库维护一个同步bufferrepl_backlog(积压缓冲区),用以保存已经发送给从库的Redis命令;从库保存了主库的runid以及与主库同步的偏移量repl_offset。如果主从之间的网络断开再恢复(主从库均未重启),从库同步偏移量repl_offset在主库的repl_backlog之内,那么主从之间不需要全同步,只需要做增量复制。

PSYNC协议主要是为了解决网络抖动问题带来的主从全同步。在日常运维redis过程中,只要合理设置repl_backlog_size就可以利用PSYNC协议解决网络抖动带来的全量同步。

但是PSYNC也有一些缺陷。比如发生故障转移时,PSYNC处理的不够好。
用一主两从故障转移举例说明。拓扑结构如下:S1 --> M <-- S2。当M宕机时,将S1提升为新主库。此时无论S2或者M想成为新主库的从库,都必须做全量同步。这导致一发生故障转移,就必须做全量同步,这是不合理的。而且也对运维和集群性能产生非常大的影响。
同样的其他拓扑结构也会导致一样的问题,总结一下:

  1. 在链式一主两从结构中,M <-- S1 <-- S2,当S1不可用,S2直连M时,S2和M需要做全同步;
  2. 在树状一主两从结构中,S1 --> M <-- S2,当M不可用,S2做S1的从库时,S2和S1需要做全同步;
  3. 在一主一从的结构中,M <-- S,当主从角色互换时,需要做全同步。

其次PSYNC对重启的支持也不好。一旦发生重启,即使不变更主从关系,也会发生全量同步。

在以上情况中,如果所有实例保存的数据都相同,完全可以不需要进行全同步。所以Redis 4.0版本改进了复制协议PSYNC2,尽量使得全同步不要出现。

PSYNC2

PSYNC2解决了上面的问题(图片来源于网上)。

  1. 在建立主从复制关系时,master会将自己的replid传递给slaveslave会把自己的replid更新为master的,这样逐级传递下去。最终masterslave1slave2server.replid全部一样,都是masterreplid
  2. 主从复制建立完成之后,这条复制链上所有的数据都由master产生,也就是说masterslave1slave2offset也全都匹配得上。

那么在具体看一下pysnc2如何解决之前的问题。

  1. 在链式一主两从结构中,M <-- S1 <-- S2,当S1不可用,S2直连M时,S2和M需要做全同步;
    通过前面1,2项可以看出,MS2具有相同的replid,并且offset也可以匹配得上,此时就可以直接进行增量同步,避免了全量同步的开销。
  2. 在树状一主两从结构中,S1 --> M <-- S2,当M不可用,S2做S1的从库时,S2和S1需要做全同步;
    S1变更为主时,原来masterreplidoffset不会丢弃,而是会保存在replid2second_repl_offset中,参与匹配。那么S2replidoffset都能从新主中找到replid2,并且和新主的second_repl_offset也匹配的上,就可以直接进行增量同步,避免全量同步的开销。
  3. 在一主一从的结构中,M <-- S,当主从角色互换时,需要做全同步。
    S变更为主时,原来masterreplidoffset不会丢弃,而是会保存在replid2second_repl_offset中,参与匹配。那么Mreplidoffset都能从新主中找到replid2,并且和新主的second_repl_offset也匹配的上,就可以直接进行增量同步,避免全量同步的开销。

其次、实例的repl-idrepl-offset保存到RDB文件中,保证从库重启之后,依然可以进行半同步。

PSYNC2只是一定程度上弥补psync的缺陷,当超过second_repl_offset,依然会进行全量同步。
所以在引进新功能的同时,也要注意合理设置repl-backlog-buffer大小。

实现细节:

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Docker Redis 4.0是通过Docker容器运行Redis 4.0版本的一个实例。以下是安装和使用Docker Redis 4.0的步骤: 1. 首先,您需要通过Docker命令查询Redis 4.0镜像并将其拉取到本地系统中。可以使用以下命令执行这一步骤: `docker search redis` `docker pull redis:4.0` 2. 下一步是创建一个目录,并在其中创建一个名为redis.conf的配置文件。如果您不手动创建该文件,Docker在运行时将自动创建一个目录,但没有配置文件。可以使用以下命令执行这一步骤: `mkdir -p /usr/local/redis/conf` `cd /usr/local/redis/conf` `touch redis.conf` 3. 然后,您需要启动容器来运行Redis 4.0实例。在这个例子中,我们使用的端口号是16379,您可以根据需要修改为常用的6379端口。可以使用以下命令执行这一步骤: `docker run -p 16379:6379 --name redis4_0_11 --privileged=true -v /usr/local/redis/data:/data -v /usr/local/redis/conf/redis.conf:/etc/redis/redis.conf -d redis:4.0.11 redis-server /etc/redis/redis.conf --requirepass "123456" --appendonly yes` 4. 当容器成功启动后,您可以使用以下命令来查看Docker容器的状态: `docker ps -a` 5. 最后,您可以使用Redis Desktop Manager或其他工具来测试与Docker Redis 4.0的连接。确保连接正常后,您就可以开始使用Redis 4.0了。 请注意,上述步骤中的命令可能需要根据您的实际情况进行调整,例如目录路径或容器名称等。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [Docker——Docker安装Redis4.0](https://blog.csdn.net/weixin_43835659/article/details/103910746)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [基于docker的redis4.0单机集群搭建](https://blog.csdn.net/qq_34341457/article/details/103801238)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值