Redis 的主从复制

最新推荐文章于 2023-11-10 17:23:06 发布
最新推荐文章于 2023-11-10 17:23:06 发布
阅读量295 收藏
点赞数

Redis主从复制


概述

一般来说，要将Redis运用于工程项目中，只使用一台Redis是万万不能的，原因如下：

  1. 从结构上，单个Redis服务器会发生单点故障，并且一台服务器需要处理所有的请求负载，压力较大；
  2. 从容量上，单个Redis服务器内存容量有限，就算一台Redis服务器内容容量为256G，也不能将所有内容用作Redis存储内存，一般来说，单台Redis最大使用内存不应该超过20G。

本文先讨论第一点的解决方案：Redis主从复制，第二点可以使用Redis集群解决，下一篇文章将介绍Redis集群。

主从复制

考虑如下一种场景：

电子商务网站上的商品，一般都是一次上传，无数次浏览的，说专业点也就是”多读少写”。

对于这种场景，我们可以使如下这种架构：
Redis主从复制结构图

如图中所示，我们将一台Redis服务器作主库(Matser)，其他三台作为从库(Slave)，主库只负责写数据，每次有数据更新都将更新的数据同步到它所有的从库，而从库只负责读数据。这样一来，就有了两个好处：

  1. 读写分离，不仅可以提高服务器的负载能力，并且可以根据读请求的规模自由增加或者减少从库的数量，棒极了；
  2. 数据被复制成了了好几份，就算有一台机器出现故障，也可以使用其他机器的数据快速恢复。

需要注意的是：在Redis主从模式中，一台主库可以拥有多个从库，但是一个从库只能隶属于一个主库。

配置

在Redis中，要实现主从复制架构非常简单，只需要在从数据库的配置文件中加上如下命令即可：

1

slaveof 主数据库地址  主数据库端口

主数据库不需要任何配置。

示例

下面将演示怎么实现一个简单的复制系统。我们在一台机器上起两个Redis实例，监听不同的端口，其中一个作为主库，另外一个作为从库。首先不加任何参数来启动一个Redis实例作为主数据库：

可以看到，主库监听的是6379端口。

然后加上slaveof参数启动另一个Redis实例作为从库，并且监听6380端口：

从控制台输出中可以看到，从库已经连接到主库：126.0.0.1:6379了，看样子主从复制系统配置成功。我们可以分别在主库和从库中使用如下命令看一看当前实例在复制系统中的相关信息：

接下来验证一把。

首先在主库中设置一个键值：

1
2
3
4

[qifuguang@Mac~]$ /opt/soft/redis-3.0.4/src/redis-cli -p 6379
127.0.0.1:6379> set test-sync winwill2012
OK
127.0.0.1:6379>

现在到从库中检查该值是否已经自动同步到了从库：

1
2
3
4

[qifuguang@Mac~]$ /opt/soft/redis-3.0.4/src/redis-cli -p 6380
127.0.0.1:6380> get test-sync
"winwill2012"
127.0.0.1:6380>

可以看到，数据确实从主库同步到了从库.

在默认情况下，从库是只读的，如果在从库中写数据将会报错：

1
2
3
4

[qifuguang@Mac~]$ /opt/soft/redis-3.0.4/src/redis-cli -p 6380
127.0.0.1:6380> set x y
(error) READONLY You can't write against a read only slave.
127.0.0.1:6380>

但是可以在从库的配置文件中加上如下的配置项允许从库写数据：

1

slave-read-only no

但是，因为从库中修改的数据不会被同步到任何其他数据库，并且一旦主库修改了数据，从库的数据就会因为自动同步被覆盖，所以一般情况下，不建议将从库设置为可写。

相同的道理，配置多台从库也使用相同的方法，都在从库的配置文件中加上slaveof参数即可。

此外，我们可以在客户端使用命令

1

SLAVEOF 新主库地址  新主库端口

来修改当前数据库的主库，如果当前数据库已经是其他库的从库， 则当前数据库会停止和原来的数据库的同步而和新的数据库同步。

最后，从数据库还可以通过运行命令：

1

SLAVEOF NO ONE

来停止接受来自其他数据库的同步而升级成为主库。

原理

上面说了配置主从复制系统的方法，并且举例例子详细说明，本节将介绍Redis主从复制的实现原理。

当一个从数据库启动时，会向主数据库发送SYNC命令，主数据库收到命令后会开始在后台保存快照（即RDB持久化过程），并将保存快照期间接收到的命令缓存起来。当快照完成后，Redis会将快照文件和缓存的命令发给从数据库，从数据库收到数据后，会载入快照文件并执行缓存的命令。以上过程称为复制初始化。复制初始化之结束后，主数据库每收到写命令时就会将命令同步给从数据库，从而保证主从数据库数据一致，这一过程称为复制同步阶段。

有两点需要注意：

  1. 当主从数据库之间的连接断开后，Redis2.8之前的版本会重新进行复制初始化过程，这样就使得主从数据库断开连接后数据恢复的过程的效率很低下。Redis2.8版本的一个重要改进就是断线支持有条件的增量数据传输，当从数据库再次连接到主数据库时，主数据库只需要将断线期间执行的命令发给从数据库即可，大大提高了Redis主从复制的实用性。
  2. 复制同步阶段贯穿整个主从同步过程的始终，直到主从关系终止为止。在复制过程中，即使关闭了RDB方式的持久化(删除所有save参数)，依旧会执行快照操作。

乐观复制

Redis采用了复制的策略。容忍在一定时间内主从数据库的内容是不同的，但是两者的数据最终会保持一致。具体来说，Redis主从数据库之间的复制数据的过程本身是异步的，这意味着，主数据库执行完客户端的写请求后会立即将命令在主数据库的执行结果返回给客户端，而不会等待从数据库收到该命令后再返回给客户端。这一特性保证了复制后主从数据库的性能不会受到影响，但另一方面也会产生一个主从数据库数据不一致的时间窗口，当主数据库执行一条写命令之后，主数据库的数据已经发生变动，然而在主数据库将该命令传送给从数据库之前，如果两个数据库之间的连接断开了，此时二者间的数据就不一致了。从这个角度看，主数据库无法得知命令最终同步给了几个从数据库，不过Redis提供了两个配置选项来限制只有至少同步给指定数量的数据库时，主数据库才是可写的：

1
2

min-slaves-to-write 3
min-slave2-max-lag 10

第一个参数表示只有当3个或3个以上的从数据库连接到主库时，主数据库才是可写的，否则返回错误。
第二个参数表示允许从数据库失去连接的最长时间，该选项默认是关闭的，在分布式系统中，打开并合理配置该选项可以降低主从架构因为网络分区导致的数据不一致问题。

图结构

从数据库不仅可以接收主数据库的数据，同时也可以作为主数据库存在，形成类似图的结构，如下图：

A中的数据会同步到B,C中，C中的数据会同步到D,E中。

目前您尚未登录，请 登录 或 注册 后进行评论
u013043341
  • u013043341
    2017-08-31 21:30 4楼
  • 学习到了，谢谢博主分享，多多加油！

zyt425916200
Y8806662681
  • Y8806662681
    2017-07-28 16:37 2楼
  • 你好，那客户端读取数据是怎么读取的呢？
    1 主机与从机读写分离，那么如果主机数据修改了还没同步到从机，这个时候去从机读到的数据不就有问题了么？

    2 如果有多台从机，主机往从机写数据也会有先后顺序吧。比如A,B,C三台从机，当主机把数据写到从机A时，客户端读到了从机C的数据怎么办？

u013034640

Redis主从复制和集群配置

  • u011204847
  • u011204847
  • 2016年05月03日 19:58
  • 38665
Redis主从复制和集群配置    redis主从复制概述1、redis的复制功能是支持多个数据库之间的数据同步。一类是主数据库（master）一类是从数据库（slave）...

Redis源码解析：17Resis主从复制之主节点的部分重同步流程及其他

本文主要讲解主节点部分重同步的实现，以及主从复制中的其他功能。本文是Redis主从复制机制的最后一篇文章。          主节点在收到从节点发来的PSYNC命令之前，主节点的部分重同步流程，与...
  • gqtcgq
  • gqtcgq
  • 2016年04月30日 17:31
  • 3025

Redis主从复制实现

  • why_2012_gogo
  • why_2012_gogo
  • 2016年05月17日 15:36
  • 1321
Redis中的主从复制，也就是Master-Slave模型，其实现相对比较简单，一般使用在多个Redis实例间的数据同步以及Redis集群中用的比较多。• 工作原理• 特征说明• 如何配置•...

redis的主从复制配置

  • yangzhenzhen
  • yangzhenzhen
  • 2013年01月17日 10:29
  • 39915
redis的主从复制配置一、     原理Redis的主从复制功能非常强大，一个master可以拥有多个slave，而一个slave又可以拥有多个slave，如此下去，形成了强大的多级服务...

Redis实现主从复制（Master&Slave）

  • zhangguanghui002
  • zhangguanghui002
  • 2017年11月13日 21:06
  • 537
由于前段时间公司项目比较赶，一直抽不出时间写博客，今天偷空写一篇吧。前面给大家讲解了单机版redis的基本操作，现在继续给大家讲解一下Redis的进阶部分，主从复制和读写分离。一、Master&S...

Redis集群之主从复制，读写分离（上）（五）

  • cuipeng0916
  • cuipeng0916
  • 2016年12月17日 10:18
  • 4642
前言：随着web2.0的进一步发展，网民的生产力进一步提升，存储总量开始增加。 此时虽然仍然是读多写少的模式，但写入量已经大大提升。 原有的缓存技术不能缓解写入压力，而且原有的空间也受硬盘限制，因此开...

Redis学习笔记五：redis主从复制

  • lijunxian1013
  • lijunxian1013
  • 2016年07月22日 13:59
  • 3130
1: 主从备份 防止主机宕机2: 读写分离,分担master的任务3: 任务分离,如从服分别分担备份工作与计算工作1、 系统：centos 6.5 2、服务器数量：采用单台服务器，以多实例的方...

Redis主从复制

  • zouyujie1127
  • zouyujie1127
  • 2014年11月23日 15:18
  • 6726
Redis的主从复制功能非常强大，一个master可以拥有多个slave，而一个slave又可以拥有多个slave，如此下去，形成了强大的多级服务器集群架构.实现步骤如下:1.在Windows...

Redis 主从复制

  • qq_19558705
  • qq_19558705
  • 2017年11月30日 22:14
  • 314
本章介绍Redis的一个强大功能--主从复制。一台master主机可以拥有多台slave从机，而一台slave从机又可以拥有多个slave从机。如此下去，形成强大的多级服务器集群架构（高扩展）。可以避...

Redis研究（十二）—主从复制

  • wtyvhreal
  • wtyvhreal
  • 2015年01月21日 21:25
  • 2913
在上一节中我们写了Redis的数据持久化http://blog.csdn.net/wtyvhreal/article/details/42916503     通过持久化功能，Redis保证了...

Redis主从复制总结整理

  • imxiangzi
  • imxiangzi
  • 2016年09月01日 16:25
  • 420
Redis的主从复制策略是通过其持久化的rdb文件来实现的，其过程是先dump出rdb文件，将rdb文件全量传输给slave，然后再将dump后的操作实时同步到slave中。让从服务器(slave s...

redis主从复制和集群实现原理

  • nuli888
  • nuli888
  • 2016年08月06日 16:17
  • 12235
redis主从复制redis主从配置比较简单，基本就是在从节点配置文件加上:slaveof 192.168.33.130 6379主要是通过master server持久化的rdb文件实现的。ma...

Redis源码解析：15Resis主从复制之从节点流程

  • gqtcgq
  • gqtcgq
  • 2016年04月17日 10:43
  • 3397
Redis的主从复制功能，可以实现Redis实例的高可用，避免单个Redis 服务器的单点故障，并且可以实现负载均衡。 一：主从复制过程         Redis的复制功能分为同步(sync)...

redis主从复制及切换

  • xiaoyu_0217
  • xiaoyu_0217
  • 2017年07月17日 18:39
  • 403
现在我的系统用redis做缓存服务器，redis是一个单点，当一台机器岩机的时候，redis的服务完全停止，这时就会影响其他服务的正常运行，所以我们要做的是redis主从复制及主动切换，这就是redi...

redis的主从复制(读写分离)/哨兵(主从切换)配置

  • zmx729618
  • zmx729618
  • 2017年08月04日 14:04
  • 1229
当数据量变得庞大的时候，读写分离还是很有必要的。同时避免一个redis服务宕机，导致应用宕机的情况，我们启用sentinel(哨兵)服务，实现主从切换的功能。redis提供了一个master,多个sl...

Redis主从架构和主从从架构集群搭建详细步骤

  • RobertoHuang
  • RobertoHuang
  • 2017年04月25日 20:08
  • 2164
Redis主从复制的功能非常强大,它有以下好处:1.避免Redis单点故障2.构建读写分离架构，满足读多写少的应用场景1.主从架构1.1 Redis主从架构拓扑图结构 1.2 主从结构搭建Redi...

Redis集群 - 配置最简单的Redis主从

  • github_26672553
  • github_26672553
  • 2017年04月08日 10:57
  • 987
要求： 1、你已经知道redis是什么 2、熟悉Linux基本操作(CentOS 6.5) 3、有单机redis开发相关经验 4、有主观能动性，至少熟练百度的使用redis主从...

redis主从配置及主从切换

  • zfl092005
  • zfl092005
  • 2013年12月24日 10:00
  • 61936
环境描述：主redis：192.168.10.1 6379从redis：192.168.10.2 6380一、主从配置1、将主从redis配置文件redis.conf中的aemon...

Redis 主从配置心得及其高可用方案

  • Quiet_boy
  • Quiet_boy
  • 2016年12月26日 13:29
  • 4601
redis主从复制过程：当配置好slave后，slave与master建立连接，然后发送sync命令。无论是第一次连接还是重新连接，master都会启动一个后台进程，将 数据库快照保存到文件中，同...

Redis学习笔记(三) Redis主从架构和主从从架构 (1)

Redis的主从复制功能非常强大，一个master可以拥有多个slave,而一个slave又可以拥有多个slave,如此下去,形成了强大的多级服务器集群架构. 可以避免Redis单点故障,构建读写分离...
  • a67474506
  • a67474506
  • 2015年12月30日 16:12
  • 6927
等级：
访问量： 43万+
积分： 3501
排名： 1万+

他的最新文章

更多文章

文章分类

展开

文章存档

展开

他的热门文章

联系我们

客服
请扫描二维码联系客服

webmaster@csdn.net

400-660-0108

QQ客服 客服论坛

关于招聘广告服务 百度

©1999-2018 CSDN版权所有

京ICP证09002463号

经营性网站备案信息

网络110报警服务

中国互联网举报中心

北京互联网违法和不良信息举报中心





加入CSDN，享受更精准的内容推荐，与500万程序员共同成长！
注册
lzxuanxuan_33
关注
Redis（主从复制、哨兵模式、集群）概述及部署
愿你成为自己喜欢的模样，不抱怨，不将就，有自由，有光芒！
02-25 3189
文章目录一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建1、环境配置/安装包2、安装Redis（所有主机）3、修改Master节点Redis配置文件4、修改Slave节点Redis配置文件5、验证主从效果二、Redis 哨兵模式1、哨兵模式的原理2、哨兵模式的作用3、哨兵模式的结构4、哨兵模式的搭建1、环境配置2、修改 Redis 配置文件（所有节点操作）2、启动哨兵模式3、故障模拟4、验证结果三、Redis 群集模式1、
redis系列4——复制模式
xiaodigua1024的博客
03-14 358
redis复制模式，实现多个数据相同的redis副本。如果主节点挂了，运维可以让从节点变成主节点，服务还可以继续使用。redis保证最终一致性。
Redis的主从复制设置与安装
木小鱼的笔记
05-14 1281
引言： 本文将讲述如何在Redis进行主从设置。
Redis 集群的主从复制模型是怎样的
weixin_40426261的博客
05-21 296
为了使在部分节点失败或者大部分节点无法通信的情况下集群仍然可用， 所以 集群使用了主从复制模型,每个节点都会有 N-1 个复制品
Redis面试题分享十六：Redis 集群的主从复制模型是怎样的？
最新发布
之乎者也·的博客
11-10 130
从上面的主从复制过程，我们知道master需要给slave节点发送文件快照，如果slave节点过多的话，就会导致master节点压力多，所以让master节点先推送到slave1,由slave1节点，代理去同步给slave3与slave4，减轻了slave节点的压力。可以让master负责负责读写，slave负责对master的数据进行持久化，提高可靠性。针对读操作比较频繁的情况，可以让master负责写操作，将读操作交给slave。根据拓扑复杂性可以分为以下三种：⼀主⼀从、⼀主多从、树状主从结构。
Redis主从复制问题和扩容问题的解决思路
01-19
为了解决Redis主从Copy的问题，有如下两个解决方案： 主动复制所谓主动复制，就是业务层双写多个Redis，避开Redis自带的主从复制。但是自己干同步，就会产生一致性问题，为了保证主从一致，需要加入一系列的验证机制...
Redis主从复制以及主从复制技术原理.docx
10-14
Redis 主从复制技术原理 概述 Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库，并提供多种语言的 API。Redis 主从复制是指将一台 Redis 服务器的数据，复制到...
Redis主从复制和集群配置
08-21
### Redis主从复制和集群配置详解 #### 一、Redis主从复制原理及配置 **1.1 概述** Redis的主从复制机制是一种重要的数据同步方式，它支持一个或多个从数据库(slave)与主数据库(master)之间进行数据同步。其中，...
通过SSRF操作Redis主从复制写Webshell_R3start1
08-03
1.使用 DICT 协议添加一条测试记录 2.设置保存路径 3.设置保存文件名 4.保存 1.连接远程主服务器 2.设置保存路径 3.设置保存文件名 4.保存
redis主从复制原理的深入讲解
12-16
本文主要针对redis主从复制的原理进行了讲解，分享出来供大家参考学习，下面话不多说了，来一起看看详细的介绍吧 1.复制过程 2.数据间的同步 3.全量复制 4.部分复制 5.心跳 6.异步复制 1.复制过程 从节点执行 ...
Redis集群之主从复制模式
搬砖老农工的博客
01-04 1122
1.概念 主从复制模型中，有多个redis节点。其中，有且仅有一个为主节点Master。从节点Slave可以有多个。只要网络连接正常，Master会一直将自己的数据更新同步给Slaves，保持主从同步。 2.特点 主节点Master可读、可写. 从节点Slave只读。（read-only） 因此，主从模型可以提高读的能力，在一定程度上缓解了写的能力。因为能写仍然只有Master节点一个，可以将读的操作全部移交到从节点上，变相提高了写能力。 3.环境准备 准备3个redis服务，一主两从 主节点
2021-05-13 Redis面试题 Redis集群的主从复制模型是怎样的？
热门推荐
微软MVP Eleven
05-13 4万+
Redis集群的主从复制模型是怎样的？ 为了使在部分节点失败或者大部分节点无法通信的情况下集群仍然可用，所以集群使用了主从复制模型,每个节点都会有N-1个复制品.
Redis高可用技术介绍及部署（主从复制、集群、哨兵）
bugggggggg的博客
05-11 283
文章目录一、Redis高可用技术二、Redis主从复制1. 主从复制的作用2. 主从复制流程3. 搭建主从复制1. 修改Master节点配置文件2. 修改Slave节点配置文件（两台相同）3. 验证主从复制三、Redis哨兵1.哨兵模式结构2. 哨兵模式配置3. 启动哨兵模式4. 模拟故障恢复5. 故障转移过程四、集群模式1. 集群作用2. 集群模式搭建1. 修改节点配置文件2. 所有节点启动redis3. 启动集群（任何一个节点输入都可以）4. 查看节点哈希槽及测试 一、Redis高可用技术 在Redis
真•Redis集群搭建之主从复制模式（详细）
m0_64284147的博客
07-10 529
一、概念主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(master/leader)，后者称为从节点(slave/follower);数据的复制是单向的，只能由主节点到从节点。一般来说80%的情况下都是在进行读操作，所以为了减轻服务器的压力，一般Master以写为主，Slave以读为主。默认情况下，每台Redis服务器都是主节点;且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点,二、主从复制的作用1、数据冗余:主从复制实现了数据的热备份，是
Redis专题：Redis集群方案——主从复制模式
Mr_zhangbz的博客
08-21 387
1
Redis缓存数据库-----概述(2)
weixin_30824599的博客
07-13 176
Redis讲义 目录 1 要讲的内容 3 2 redis集群简介 3 2.1 集群的概念 3 2.1.1 使用red...
Redis总结集群方式之主从复制
增量星球
07-08 1452
绪论 最近由于小编颈椎病犯了，所以最近停更了文章，今天下午刚收到几千里地老父亲寄来的艾灸贴，晚上贴上之后，伴随着火辣辣的感觉开始创作现在这篇文章；若大家get到了东西，请爱心三连。 废话不再多言，下面我们进入正题。 主从复制 同步策略 全量同步 时机：slave初始化阶段； 机制：slave服务器需要将master服务器上的所有数据都复制一份。 增量同步 时机：slave初始化之后且正常工作； 机制：master服务器每执行一次新的写操作命令同步到slave服务器上，从服务器接收并执行该写命令操作； .
Redis学习（八）Redis主从复制
zhoujian_Liu的博客
06-29 365
1   Redis的主从复制1.1    什么是主从复制         持久化保证了即使redis服务重启也不会丢失数据，因为redis服务重启后会将硬盘上持久化的数据恢复到内存中，但是当redis服务器的硬盘损坏了可能会导致数据丢失，如果通过redis的主从复制机制就可以避免这种单点故障，如下图：说明：主redis中的数据有两个副本（replication）即从redis1和从redis2，即...
0060-redis主从复制的几种模型
登峰小蚁
03-18 2700
文章目录1. 一主一从2. 一主多从3. 树形拓扑4. 主从复制的缺点 1. 一主一从 最简单的主从模型，主机将数据同步给从机，从机提供查询，另外从机可以开启aof，既能保证效率，又可靠。 2. 一主多从 一个主机，多个从机，主机提供数据写入，从机提供数据查询 3. 树形拓扑 一主多从的架构会导致master的数据同步压力过大，所以可以采用树形拓扑的方式，主机只需要同步给其中一台slave...
redis 主从复制
08-12
要在Linux上搭建Redis主从复制，需要按照以下步骤进行操作： 1. 安装Redis：在Linux上安装Redis，可以使用apt-get或yum命令进行安装。 2. 配置Redis主服务器：在Redis主服务器上，需要修改redis.conf配置文件，将bind参数设置为主服务器的IP地址，将protected-mode参数设置为no，将slave-read-only参数设置为no，将requirepass参数设置为一个密码，以保证安全性。 3. 启动Redis主服务器：启动Redis主服务器，使用redis-server命令即可。 4. 配置Redis从服务器：在Redis从服务器上，需要修改redis.conf配置文件，将bind参数设置为从服务器的IP地址，将protected-mode参数设置为no，将slave-read-only参数设置为yes，将masterauth参数设置为主服务器的密码。 5. 启动Redis从服务器：启动Redis从服务器，使用redis-server命令即可。 6. 连接Redis主从服务器：在Redis从服务器上，使用redis-cli命令连接Redis主服务器，使用slaveof命令将从服务器设置为主服务器的从服务器。 7. 测试Redis主从复制：在Redis主服务器上，使用set命令设置一个键值对，然后在Redis从服务器上使用get命令获取该键值对，如果能够获取到，则说明Redis主从复制已经成功搭建。 以上就是在Linux上搭建Redis主从复制的步骤，需要注意的是，在配置Redis主从服务器时，需要根据实际情况进行修改，以保证配置的正确性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值