Redis三种模式——主从复制、哨兵模式、集群

最新推荐文章于 2022-12-06 12:07:49 发布
最新推荐文章于 2022-12-06 12:07:49 发布
阅读量434 收藏
点赞数
文章标签： redis java 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_61744194/article/details/125797550
版权

Redis三种模式——主从复制、哨兵模式、集群

一、Redis主从复制

1、Redis主从复制的概念

  • 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(Master)，后者称为从节点(Slave)；数据的复制是单向的，只能由主节点到从节点。
  • 默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点。

2、Redis主从复制的作用

数据冗余：

  • 主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。

故障恢复：

  • 当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。

负载均衡：

  • 在主从复制的基础上，配合读写分离，可以由主节点提供写服务，由从节点提供读服务（即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点），分担服务器负载；尤其是在写少读多的场景下，通过多个从节点分担读负载，可以大大提高Redis服务器的并发量。

高可用基石：

  • 除了上述作用以外，主从复制还是哨兵和集群能够实施的基础，因此说主从复制是Redis高可用的基础。

3、Redis主从复制的流程

  • 若启动一个Slave机器进程，则它会向Master机器发送一个“sync command”命令，请求同步连接。
  • 无论是第一次连接还是重新连接，Master机器都会启动一个后台进程，将数据快照保存到数据文件中（执行rdb操作），同时Master还会记录修改数据的所有命令并缓存在数据文件中。
  • 后台进程完成缓存操作之后，Maste机器就会向Slave机器发送数据文件，Slave端机器将数据文件保存到硬盘上，然后将其加载到内存中，接着Master机器就会将修改数据的所有操作一并发送给Slave端机器。若Slave出现故障导致宕机，则恢复正常后会自动重新连接。
  • Master机器收到Slave端机器的连接后，将其完整的数据文件发送给Slave端机器，如果Mater同时收到多个Slave发来的同步请求，则Master会在后台启动一个进程以保存数据文件，然后将其发送给所有的Slave端机器，确保所有的Slave端机器都正常。

在这里插入图片描述

4、Redis主从复制的搭建

1、环境配置/安装包

安装包链接：redis-5.0.7.tar.gz

主机操作系统IP地址软件 / 安装包 / 工具
MasterCentOS7192.168.61.11redis-5.0.7.tar.gz
Slave1CentOS7192.168.61.22redis-5.0.7.tar.gz
Slave2CentOS7192.168.61.33redis-5.0.7.tar.gz

2、安装Redis（所有主机）

systemctl stop firewalld
setenforce 0

yum install -y gcc gcc-c++ make

tar zxvf redis-5.0.7.tar.gz -C /opt/

cd /opt/redis-5.0.7/
make
make PREFIX=/usr/local/redis install

cd /opt/redis-5.0.7/utils
./install_server.sh

回车四次，下一步需要手动输入

Please select the redis executable path [] /usr/local/redis/bin/redis-server  	

ln -s /usr/local/redis/bin/* /usr/local/bin/

## 三台机器都装一遍

3、修改Master节点Redis配置文件

（192.168.61.11）

vim /etc/redis/6379.conf
bind 0.0.0.0						#70行，修改bind 项，0.0.0.0监听所有网段
daemonize yes						#137行，开启守护进程
logfile /var/log/redis_6379.log		#172行，指定日志文件目录
dir /var/lib/redis/6379				#264行，指定工作目录
appendonly yes						#700行，开启AOF持久化功能

/etc/init.d/redis_6379 restart

4、修改Slave节点Redis配置文件

（192.168.61.22）、（192.168.61.33）

vim /etc/redis/6379.conf
bind 0.0.0.0						#70行，修改bind 项，0.0.0.0监听所有网卡
daemonize yes						#137行，开启守护进程
logfile /var/log/redis_6379.log		#172行，指定日志文件目录
dir /var/lib/redis/6379				#264行，指定工作目录
replicaof 192.168.80.71 6379		#288行，指定要同步的Master节点IP和端口
appendonly yes						#700行，开启AOF持久化功能

/etc/init.d/redis_6379 restart

5、验证主从效果

在Master节点上看日志

tail -f /var/log/redis_6379.log

二、Redis 哨兵模式

哨兵的核心功能：在主从复制的基础上，哨兵引入了主节点的自动故障转移

1、哨兵模式的原理

哨兵(sentinel)：

是一个分布式系统，用于对主从结构中的每台服务器进行监控，当出现故障时通过投票机制选择新的 Master 并将所有 Slave 连接到新的 Master。所以整个运行哨兵的集群的数量不得少于3个节点。
哨兵模式一定是奇数

2、哨兵模式的作用

监控：

哨兵会不断地检查主节点和从节点是否运作正常。

自动故障转移：

当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从节点升级为新的主节点，并让其他从节点改为复制新的主节点。

=通知（提醒）：

哨兵可以将故障转移的结果发送给客户端。

3、哨兵模式的结构

哨兵结构由两部分组成， 哨兵节点和数据节点：

  • 哨兵节点：哨兵系统由一个或多个哨兵节点组成，哨兵节点是特殊的redis节点，不存储数据。

  • 数据节点：主节点和从节点都是数据节点。

哨兵的启动依赖于主从模式，所以须把主从模式安装好的情况下再去做哨兵模式，所有节点上都需要部署哨兵模式，哨兵模式会监控所有的 Redis 工作节点是否正常，当 Master 出现问题的时候，因为其他节点与主节点失去联系，因此会投票，投票过半就认为这个 Master 的确出现问题，然后会通知哨兵，然后从 Slaves 中选取一个作为新的 Master。

需要特别注意的是，客观下线是主节点才有的概念；如果从节点和哨兵节点发生故障，被哨兵主观下线后，不会再有后续的客观下线和故障转移操作。

4、哨兵模式的搭建

1、环境配置

基于主从复制已搭建完成

主机操作系统IP地址软件 / 安装包 / 工具
MasterCentOS7192.168.61.11redis-5.0.7.tar.gz
Slave1CentOS7192.168.61.22redis-5.0.7.tar.gz
Slave2CentOS7192.168.61.33redis-5.0.7.tar.gz

2、修改 Redis 配置文件（所有节点操作）

systemctl stop firewalld
setenforce 0

vim /opt/redis-5.0.7/sentinel.conf
protected-mode no								#17行，关闭保护模式
port 26379										#21行，Redis哨兵默认的监听端口
daemonize yes									#26行，指定sentinel为后台启动
logfile "/var/log/sentinel.log"					#36行，指定日志存放路径
dir "/var/lib/redis/6379"						#65行，指定数据库存放路径
sentinel monitor mymaster 192.168.61.11 6379 2	#84行，修改 指定该哨兵节点监控192.168.184.10:6379这个主节点，该主节点的名称是mymaster，最后的2的含义与主节点的故障判定有关：至少需要2个哨兵节点同意，才能判定主节点故障并进行故障转移
sentinel down-after-milliseconds mymaster 30000	#113行，判定服务器down掉的时间周期，默认30000毫秒（30秒）
sentinel failover-timeout mymaster 180000		#146行，故障节点的最大超时时间为180000（180秒）

2、启动哨兵模式

先启master，再启slave

cd /opt/redis-5.0.7/
redis-sentinel sentinel.conf &
注意！先启动主服务器，再启动从服务器

3、故障模拟

查看redis-server进程号

ps aux | grep redis

root      57394  0.0  0.1 165620  2660 ?        Ssl  15:12   0:04 /usr/local/redis/bin/redis-server 0.0.0.0:6379
root      58234  0.1  0.1 153844  2720 ?        Ssl  16:34   0:00 redis-sentinel *:26379 [sentinel]
root      58247  0.0  0.0 112676   980 pts/4    R+   16:34   0:00 grep --color=auto redis
[1]+  完成                  redis-sentinel sentinel.conf

杀死 Master 节点上redis-server的进程号

kill -9 4547			#Master节点上redis-server的进程号

4、验证结果

tail -f /var/log/sentinel.log
1

redis-cli -p 26379 INFO Sentinel
1

三、Redis 群集模式

集群，即Redis Cluster，是Redis 3.0开始引入的分布式存储方案。

集群由多个节点(Node)组成，Redis的数据分布在这些节点中。集群中的节点分为主节点和从节点：只有主节点负责读写请求和集群信息的维护；从节点只进行主节点数据和状态信息的复制。

1、集群的作用

（1）数据分区： 数据分区(或称数据分片)是集群最核心的功能。

  • 集群将数据分散到多个节点，一方面突破了Redis单机内存大小的限制，存储容量大大增加；另一方面每个主节点都可以对外提供读服务和写服务，大大提高了集群的响应能力。

  • Redis单机内存大小受限问题，在介绍持久化和主从复制时都有提及；例如，如果单机内存太大，bgsave和bgrewriteaof的fork操作可能导致主进程阻塞，主从环境下主机切换时可能导致从节点长时间无法提供服务，全量复制阶段主节点的复制缓冲区可能溢出。

（2）高可用：集群支持主从复制和主节点的自动故障转移（与哨兵类似）；当任一节点发生故障时，集群仍然可以对外提供服务。

2、Redis集群的数据分片

  • Redis集群引入了哈希槽的概念
  • Redis集群有16384个哈希槽（编号0-16383）
  • 集群的每个节点负责一部分哈希槽
  • 每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽，通过这个值，去找到对应的插槽所对应的节点，然后直接自动跳转到这个对应的节点上进行存取操作
#以3个节点组成的集群为例：
节点A包含0到5460号哈希槽
节点B包含5461到10922号哈希槽
节点C包含10923到16383号哈希槽

#Redis集群的主从复制模型
集群中具有A、B、C三个节点，如果节点B失败了，整个集群就会因缺少5461-10922这个范围的槽而不可以用。
为每个节点添加一个从节点A1、B1、C1整个集群便有三个Master节点和三个slave节点组成，在节点B失败后，集群选举B1位为的主节点继续服务。当B和B1都失败后，集群将不可用

3、搭建Redis 群集模式

  • redis的集群一般需要6个节点，3主3从。方便起见，这里所有节点在6台服务器上模拟：

以IP及端口号进行区分：3个主节点端口号：7001、7003、7005，对应的从节点端口号：7002、7004、7006。

六台服务器都需要安装redis数据库

主机操作系统IP：端口软件/安装包/工具
Master1CentOS7192.168.61.11：7001redis-5.0.7.tar.gz
Slave1CentOS7192.168.61.22：7002redis-5.0.7.tar.gz
Master2CentOS7192.168.61.33：7003redis-5.0.7.tar.gz
Slave2CentOS7192.168.61.44：7004redis-5.0.7.tar.gz
Master3CentOS7192.168.61.55：7005redis-5.0.7.tar.gz
Slave3CentOS7192.168.61.66：7006redis-5.0.7.tar.gz

1、所有节点

cd /etc/redis/
mkdir -p redis-cluster/redis6379
cp /opt/redis-5.0.7/redis.conf /etc/redis/redis-cluster/redis6379/
cp /opt/redis-5.0.7/src/redis-cli /opt/redis-5.0.7/src/redis-server /etc/redis/redis-cluster/redis6379/

2、Master1节点

#其他5个文件夹的配置文件以此类推修改，注意6个端口都要不一样。
cd /etc/redis/redis-cluster/redis6379
vim redis.conf

bind 192.168.61.11						#69行，修改bind项，监听自己的IP
protected-mode no						#88行，修改，关闭保护模式
port 7001								#92行，修改，redis监听端口，
daemonize yes							#136行，以独立进程启动
cluster-enabled yes						#832行，取消注释，开启群集功能
cluster-config-file nodes-6379.conf		#840行，取消注释，群集名称文件设置，无需修改
cluster-node-timeout 15000				#846行，取消注释群集超时时间设置
appendonly yes							#699行，修改，开启AOF持久化

3、其余节点

vim /etc/redis/redis-cluster/redis6379/redis.conf
1

4、所有节点

启动redis节点

cd /etc/redis/redis-cluster/redis6379/
redis-server redis.conf

启动集群

redis-cli --cluster create 192.168.61.11:7001 192.168.61.33:7003 192.168.61.66:7006 192.168.61.22:7002 192.168.61.44:7004 192.168.61.66:7006 --cluster-replicas 1

redis-cli -h 192.168.61.11 -p 7001 -c        #加-c参数，节点之间就可以互相跳转	
cluster slots			#查看节点的哈希槽编号范围
set sky blue
cluster keyslot sky	#查看name键的槽编号
Kiro君
关注
Redis集群-Redis安装、Redis主从复制、哨兵、Redis集群
12-25
Redis集群是Redis的一种高可用性解决方案，通过主从复制、哨兵和集群三大技术模块来实现高可用性和可扩展性。本文将对Redis集群进行详细的介绍，包括Redis安装、主从复制、哨兵和集群的配置和实现。 一、Redis安装 ...
Redis的三种模式——主从复制、哨兵、集群
qq_44363920的博客
07-01 6577
Redis的三种模式——主从复制、哨兵、集群
Redis主从复制、哨兵模式、集群模式
最新发布
weixin_47622405的博客
12-06 341
Linux redis
一文读懂Redis的四种模式，单机、主从、哨兵、集群（*）
weixin_42408447的博客
10-27 3874
前言： redis有多种模式：单机模式、主从模式、哨兵模式、集群模式 1.单机模式 安装一个redis，启动起来，业务调用即可。 单机在很多场景也是有使用的，例如在一个并非必须保证高可用的情况下。 优点： 部署简单，0成本。 成本低，没有备用节点，不需要其他的开支。 高性能，单机不需要同步数据，数据天然一致性。 缺点： 可靠性保证不是很好，单节点有宕机的风险。 单机高性能受限于CPU的处理能力，redis是单线程的。 2.主从复制 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服
一文掌握Redis主从复制、哨兵、Cluster三种集群模式
lxw1844912514的博客
03-25 2220
点击上方“ 码农编程进阶笔记 ”，选择“置顶或者星标”文末有干货,每天定时与您相约！在开发测试环境中，我们一般搭建Redis的单实例来应对开发测试需求，但是在生产环境，如果对可用性、可靠...
redis 主从模式，哨兵模式，cluster(集群)模式 简介
热门推荐
鸭鸭的博客
04-10 3万+
详细可以参看《redis官网文档》或者《redis中文网》 Redis集群方式共有三种：主从模式，哨兵模式，cluster(集群)模式 主从模式:是三种集群方式里最简单的。它主要是基于Redis的主从复制特性架构的。通常我们会设置一个主节点，N个从节点;默认情况下，主节点负责处理使用者的IO操作，而从节点则会对主节点的数据进行备份，并且也会对外提供读操作的处理。主要的特点如下： 主从模式...
Docker搭建redis主从+哨兵模式集群.docx
07-27
本文档主要介绍了使用Docker搭建Redis主从复制和哨兵模式集群的步骤。下面是详细的知识点总结： 一、Docker安装 * 下载Docker二进制文件（离线安装包），使用wget命令下载 * 上传到服务器，使用MobaXterm等工具 * ...
Redis3.2.1 集群（包含主从，哨兵机制）
04-23
下面将详细讲解Redis 3.2.1集群中的主从复制和哨兵机制。 **一、主从复制** 在Redis中，主从复制是一种备份策略，它通过将主节点的数据流式传输到一个或多个从节点来创建数据副本。这样，如果主节点出现故障，可以...
Redis集群、主从复制、哨兵配置
01-30
哨兵(sentinel)是Redis官方提供的一种高可用解决方案，其主要作用是对Redis主从架构进行监控、通知和自动故障转移。 **哨兵的主要功能**： 1. **监控**：哨兵会不断地检查你的Master和Slave是否运作正常。 2. **...
Redis的四种模式：单机、主从、哨兵、集群.pdf
04-30
本文将详细解析Redis的四种运行模式：单机、主从、哨兵、集群，帮助你理解它们各自的特点和适用场景。 **单机模式** 单机模式是最基础的Redis部署方式，只需安装并启动一个Redis实例，业务直接与其交互。优点是部署...
redis集群之主从复制+哨兵模式+cluster群集（理论+实战，收获满满！！！）
qq_28361541的博客
03-19 1689
文章目录一、redis集群类型二、主从复制2.1、主从复制概念2.2、工作原理2.3、主从复制启用2.4、主从复制优缺点2.4.1、优点2.4.2、缺点三、哨兵模式3.1、基本概念3.2、哨兵模式的优缺点3.2.1、优点3.2.2、缺点四、Redis-Cluster集群4.1、cluster集群概述4.2、优缺点五、redis-cluster集群部署5.1、环境说明5.2、部署过程 一、redis...
【Redis】Redis集群的三种模式——主从复制、哨兵模式、Cluster
像风走过八千里
09-13 765
一、主从复制模式 主数据库可进行读写，当写操作导致数据变化时会自动将数据同步到从数据库； 从数据库一般是只读的，并接受主数据库同步过来的数据 1、工作原理 （1）Slave从节点服务启动并连接到Master之后，它将主动发送一个SYNC命令 （2）Master服务主节点收到同步命令后，开始执行BGSAVE命令生成快照文件（RDB文件），并使用缓冲区记录此后执行的所有写命令 （3）Master服务主节点BGSAVE执行完后，向所有Slave从节点服务发送快照文件，并在发送期间继续记录被执行的写命令 （4）S
redis的高可用（主从复制、哨兵、集群）
芦苇的博客
07-14 716
内容概要一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建（1）安装Redis（所有主机）（2）修改Master节点Redis配置文件（3）修改Slave节点Redis配置文件（4）验证主从效果二、Redis 哨兵模式1、哨兵模式的原理2、哨兵模式的作用3、哨兵模式的结构4、哨兵模式的搭建（1）修改 Redis 哨兵配置文件（所有节点操作）（2）启动哨兵模式（3）查看哨兵模式信息（4）故障模拟（5）验证结果三、Redis 群
摸透 Redis 主从复制、哨兵、Cluster 三种模式
yizhiniu_xuyw的专栏
10-16 974
概述 Redis作为缓存的高效中间件，在我们日常的开发中被频繁的使用，今天就来说一说Redis的四种模式，分别是「单机版、主从复制、哨兵、以及集群模式」。 可能，在一般公司的程序员使用单机版基本都能解决问题，在Redis的官网给出的数据是10W QPS，这对于应付一般的公司绰绰有余了，再不行就来个主从模式，实现读写分离，性能又大大提高。 但是，我们作为有抱负的程序员，仅限于单机版和主从模式的crud是不行的，至少也要了解「哨兵」和「集群模式」的原理，这样面试的时候才能和面试官扯皮啊。 之前对于...
NoSQL 之Redis主从复制、哨兵和集群介绍及详细搭建步骤
码海小虾米_的博客
07-15 779
Redis主从复制、哨兵和集群一、主从复制1.1 主从复制的概念1.2 主从复制的作用1.3 主从复制的流程1.4 部署Redis 主从复制步骤1.5 部署Redis 主从复制的具体操作步骤（实操）二、哨兵模式2.1 哨兵模式的原理2.2 哨兵模式的作用2.3 哨兵模式的结构2.4 哨兵模式的部署2.5 哨兵模式部署的具体操作步骤（实操）三、集群模式3.1 集群模式的作用3.2 集群模式的数据分片3.3 集群模式的主从复制模型3.4 Redis 集群部署步骤3.5 Redis 集群部署的具体操作步骤（实操）
redis主从复制、哨兵机制和集群
zhangxm_qz的博客
02-21 1344
1、复制（master-slave） 配置过程 修改 slave机器的 redis.conf 增加如下配置 slaveof 我这里两台slave 都配置 slaveof 192.168.159.10 6379 重启三台reidis 服务后 启动 执行 ./redis-cli 链接 本机redis 服务 然后执行info replication 可以看到主从状态信息如下 master： [r...
无奈！Redis 作者或被迫修改 master-slave 架构的描述
xingduan5153的博客
09-12 283
相信在座各位的开发者都不会对 Redis 的主从模式(master-slave)感到陌生。Redis 中的主从模式事实上也是源自 MySQL 中同名的一个概念，是同步数据的一种手段。在这样的场景下，master-slave 本来是一个不带任何感情色彩的词语。然而有很多开发者却不这样认为，他们在阅读 Redis5.0 RC5 的变更日志后发现，Redis ...
Redis集群三种方式-主从复制
qq_40923390的博客
09-30 561
主从复制原理： 从服务器连接主服务器，发送SYNC命令； 主服务器接收到SYNC命名后，开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令； 主服务器BGSAVE执行完后，向所有从服务器发送快照文件，并在发送期间继续记录被执行的写命令； 从服务器收到快照文件后丢弃所有旧数据，载入收到的快照； 主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令； 从服务器完成对快照的载入，开始接收命令请求，并执行来自主服务器缓冲区的写命令；（从服务器初始化完成） 主服务器每执行一个写命令就会向
Redis主从复制和哨兵模式介绍
HB199753的博客
11-12 2613
目录 前言 一、redis群集 1、模式 2、作用 2.1 主从复制 2.2哨兵 2.3集群 二、redis主从复制 1、概述 2、redis结构分类 3、主从复制原理 4、redis全量同步 5、redis增量复制 6、redis主从同步策略 三、搭建Redis主从复制 1、项目环境 2、关闭防火墙，安装环境 3、解压并安装 4、创建链接文件，并启动服务 5、修改配置文件 5.1 主服务器上 5.2 备选服务器上，先开启和主服务器一样的功能，再进行...
Redis集群：安装、主从复制与哨兵部署详解
本文将深入讲解Redis集群的安装、主从复制、哨兵机制以及如何实现读写分离。 1. **Redis安装**: 在实际生产环境中，Redis通常部署在Linux服务器上，因为其轻量级和稳定性更优。对于Windows环境，虽然文中提供了...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值