Redis(十七)——主从复制
1、主从复制概述
主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master/leader),后者称为从节点(slave/follower);数据的复制是单向的,只能由主节点到从节点。Master以写为主,Slave以读为主。
默认情况下,每台Redis服务器都是主节点,且一个主节点可以有多个从节点(或没有从节点),但一个从节点只能有一个主节点。
主从复制的作用主要包括:
1、数据冗余∶主从复制实现了数据的热备份,是持久化之外的一种数据冗余方式。
2、故障恢复∶当主节点出现问题时,可以由从节点提供服务,实现快速的故障恢复;实际上是一种服务的冗余。
3、负载均衡∶在主从复制的基础上,配合读写分离,可以由主节点提供写服务,由从节点提供读服务(即写Redis数据时应用连接主节点,读Redis数据时应用连接从节点),分担服务器负载;尤其是在写少读多的场景下,通过多个从节点分担读负载,可以大大提高Redis服务器的并发量。
4、高可用基石︰除了上述作用以外,主从复制还是哨兵和集群能够实施的基础,因此说主从复制是Redis高可用的基础。
主从复制架构
一般来说,要将Redis运用于工程项目中,只使用一台Redis是万万不能的,原因如下:
1、从结构上,单个Redis服务器会发生单点故障(如宕机),并且一台服务器需要处理所有的请求负载,压力较大;
2、从容量上,单个Redis服务器内存容量有限,就算一台Redis服务器内存容量为256G,也不能将所有内存用作Redis存储内存,一般来说,单台Redis最大使用内存不应该超过20G。
电商网站上的商品,一般都是一次上传,无数次浏览的,说专业点也就是"多读少写"。
对于这种场景,我们可以使如下这种架构︰主从复制,读写分离。主机负责写,从机只能读。
2、配置主从复制环境
我们只需要配置从节点,不用配置主节点。因为默认情况下,当前每台Redis服务器都是主节点。
启动redis服务,并查看该redis服务节点的信息:
1、首先复制三份配置文件,用于启动三个redis节点(一主二从)
2、配置三个redsi服务
输入命令:vim redis79.conf,修改如下配置:
port 6379 #端口6379
daemonize yes #后台启动
pidfile /var/run/redis_6379.pid ##配置PID文件路径
logfile "6379.log" #日志文件名
dbfilename dump6379.rdb #rdb文件名
输入命令:vim redis80.conf,修改如下配置:
port 6380 #端口6380
daemonize yes #后台启动
pidfile /var/run/redis_6380.pid ##配置PID文件路径
logfile "6380.log" #日志文件名
dbfilename dump6380.rdb #rdb文件名
输入命令:vim redis81.conf,修改如下配置:
port 6381 #端口6381
daemonize yes #后台启动
pidfile /var/run/redis_6381.pid ##配置PID文件路径
logfile "6381.log" #日志文件名
dbfilename dump6381.rdb #rdb文件名
3、启动三个redis服务节点
启动成功,redis集群搭建完成!
配置从节点
我们只需要配置从节点,不用配置主节点。因为默认情况下,当前每台Redis服务器都是主节点。
上面的三台redis服务节点默认都是主节点。
现在把6380和6381配置为从节点,6379为主节点,不用配置
配置方式一:调用 slaveof 命令
127.0.0.1:6380> slaveof 127.0.0.1 6379
OK
查看主节点6379的信息:
127.0.0.1:6379> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=127.0.0.1,port=6380,state=online,offset=742,lag=0
master_replid:082b4fc582bc5ced7fde2b9566d13fbfe87ee8e5
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:742
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:742
这样就通过调用 slaveof 命令把 6380 服务节点配置成 6379 服务节点的从节点了
配置方式二:在配置文件中配置。
打开 6381 服务的配置文件:在配置文件中增加以下的这一行
slaveof 127.0.0.1 6379
再查看主节点6379的信息:
127.0.0.1:6379> info replication
# Replication
role:master
connected_slaves:2 #从节点数量
slave0:ip=127.0.0.1,port=6380,state=online,offset=1834,lag=1 #从节点配置信息
slave1:ip=127.0.0.1,port=6381,state=online,offset=1834,lag=1
master_replid:082b4fc582bc5ced7fde2b9566d13fbfe87ee8e5
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:1834
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:1834
两个从节点就配置好了。
真实的从机配置应该在配置文件中配置,这样是永久有效的。如果从机是用命令配置的,假设从机宕机了,从机重启后将不会再连接到主机上。
3、主从复制原理
Slave启动成功连接到 master后会发送一个sync同步命令,
Master 接到命令,启动后台的存盘进程,同时收集所有接收到的用于修改数据集命令,在后台进程执行完毕之后,master将传送整个数据文件到slave,并完成一次完全同步。
全量复制:而slave服务在接收到数据库文件数据后,将其存盘并加载到内存中。
增量复制:Master继续将新的所有收集到的修改命令依次传给slave,完成同步
但是只要是slave重新连接到master,一次完全同步(全量复制)将被自动执行