Redis 主从，哨兵，cluster集群

最新推荐文章于 2024-11-02 12:56:00 发布
最新推荐文章于 2024-11-02 12:56:00 发布
阅读量658 收藏 18
点赞数 27
文章标签： redis 数据库 缓存
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83784774/article/details/140105664
版权

概述

主从复制

主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。

主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。

缺陷：故障恢复无法自动化；写操作无法负载均衡；存储能力受到单机的限制。

哨兵模式

在主从复制的基础上，哨兵实现了自动化的故障恢复。

缺陷：写操作无法负载均衡；存储能力受到单机的限制；哨兵无法对从节点进行自动故障转移，在读写分离场景下，从节点故障会导致读服务不可用，需要对从节点做额外的监控、切换操作。

集群模式

通过集群，Redis解决了写操作无法负载均衡，以及存储能力受到单机限制的问题，实现了较为完善的高可用方案。

Redis主从复制、哨兵模式和集群模式的区别？

主从复制可以实现数据备份，对读的负载均衡，但无法自动故障恢复

哨兵模式可以实现主节点间故障自动恢复，但无法解决写的负载均衡，存储能力会受到单机限制，无法对从节点进行自动故障转移

集群模式由于是多组节点构成，可以实现写操作的负载均衡，解决了哨兵模式存储能力受到单机限制的问题

Redis 主从复制

Redis 主从复制的工作机制

  1. slave启动后，向master发送SYNC命令，master接收到SYNC命令后通过bgsave保存快照，并使用缓冲区记录保存快照这段时间内执行的写命令
  2. master将保存的快照文件发送给slave，并继续记录执行的写命令
  3. slave接收到快照文件后，加载快照文件，载入数据
  4. master快照发送完后开始向slave发送缓冲区的写命令，slave接收命令并执行，完成复制初始化
  5. master每次执行一个写命令都会同步发送给slave保持master与slave之间数据的一致性

Redis 主从复制的作用

  • 数据冗余：主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。
  • 故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。
  • 负载均衡：在主从复制的基础上，配合读写分离，可以由主节点提供写服务，由从节点提供读服务（即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点），分担服务器负载；尤其是在写少读多的场景下，通过多个从节点分担读负载，可以大大提高Redis服务器的并发量。
  • 高可用基石：除了上述作用以外，主从复制还是哨兵和集群能够实施的基础，因此说主从复制是Redis高可用的基础。

Redis 主从复制的流程

  1. 首次同步：当从节点要进行主从复制时，它会发送一个SYNC命令给主节点。主节点收到SYNC命令后，会执行BGSAVE命令来生成RDB快照文件，并在生成期间使用缓冲区记录所有写操作。
  2. 快照传输：当主节点完成BGSAVE命令并且快照文件准备好后，将快照文件传输给从节点。主节点将快照文件发送给从节点，并且在发送过程中，主节点会继续将新的写操作缓冲到内存中。
  3. 追赶复制：当从节点收到快照文件后，会加载快照文件并应用到自己的数据集中。一旦快照文件被加载，从节点会向主节点发送一个PSYNC命令，以便获取缓冲区中未发送的写操作。
  4. 增量复制：主节点收到PSYNC命令后，会将缓冲区中未发送的写操作发送给从节点，从节点会执行这些写操作，保证与主节点的数据一致性。此时，从节点已经追赶上了主节点的状态。
  5. 同步：从节点会继续监听主节点的命令，并及时执行主节点的写操作，以保持与主节点的数据同步。主节点会定期将自己的操作发送给从节点，以便从节点保持最新的数据状态.

搭建Redis 主从复制

环境准备

Master节点：192.168.80.10
Slave1节点：192.168.80.20
Slave2节点：192.168.80.30

修改内核参数

vm.overcommit_memory = 1
net.core.somaxconn = 2048

安装redis

创建redis工作目录

环境变量

vim /etc/profile 

PATH=$PATH:/usr/local/redis/bin		#增加一行

定义systemd服务管理脚本

vim /usr/lib/systemd/system/redis-server.service
[Unit]
Description=Redis Server
After=network.target

[Service]
User=redis
Group=redis
Type=forking
TimeoutSec=0
PIDFile=/usr/local/redis/log/redis_6379.pid
ExecStart=/usr/local/redis/bin/redis-server /usr/local/redis/conf/redis.conf
ExecReload=/bin/kill -s HUP $MAINPID
ExecStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=true

[Install]
WantedBy=multi-user.target

修改 Redis 配置文件（Master节点操作）

vim /usr/local/redis/conf/redis.conf

bind 0.0.0.0									#87行，修改监听地址为0.0.0.0
protected-mode no								#111行，将本机访问保护模式设置no
port 6379										#138行，Redis默认的监听6379端口
daemonize yes									#309行，设置为守护进程，后台启动
pidfile /usr/local/redis/log/redis_6379.pid		#341行，指定 PID 文件
logfile "/usr/local/redis/log/redis_6379.log"	#354行，指定日志文件
dir /usr/local/redis/data						#504行，指定持久化文件所在目录
#requirepass abc123								#1037行，可选，设置redis密码
appendonly yes									#1380行，开启AOF

systemctl restart redis-server.service

修改 Redis 配置文件（Slave节点操作）

vim /usr/local/redis/conf/redis.conf

bind 0.0.0.0									#87行，修改监听地址为0.0.0.0
protected-mode no								#111行，将本机访问保护模式设置no
port 6379										#138行，Redis默认的监听6379端口
daemonize yes									#309行，设置为守护进程，后台启动
pidfile /usr/local/redis/log/redis_6379.pid		#341行，指定 PID 文件
logfile "/usr/local/redis/log/redis_6379.log"	#354行，指定日志文件
dir /usr/local/redis/data						#504行，指定持久化文件所在目录
#requirepass abc123								#1037行，可选，设置redis密码
appendonly yes									#1380行，开启AOF
replicaof 192.168.80.10 6379					#528行，指定要同步的Master节点IP和端口
#masterauth abc123								#535行，可选，指定Master节点的密码，仅在Master节点设置了requirepass


systemctl restart redis-server.service

验证主从效果

Redis 哨兵模式

哨兵的核心功能：在主从复制的基础上，哨兵引入了主节点的自动故障转移。

哨兵的启动依赖于主从模式，所以须把主从模式安装好的情况下再去做哨兵模式

哨兵模式的工作流程

  1. 每个哨兵节点都会定时探测主节点、从节点以及其他哨兵节点的运行状态
  2. 当哨兵节点探测到主节点异常时，就会认为主节点主观下线
  3. 当超过指定数量的哨兵节点认为主节点主观下线，就会认为主节点主观下线
  4. 哨兵会通过raft算法推举出leader，leader负责故障的转移和通知
  5. 哨兵模式会将一个从节点提升为新的主节点，然后其他从节点会和新的主节点做主从复制
  6. 同时VIP也会漂移到新的主节点
  7. 原主节点恢复故障后会自动变成从节点，并和新的主节点做主从复制

哨兵模式的作用

  • 监控：哨兵会不断地检查主节点和从节点是否运作正常。
  • 自动故障转移：当主节点不能正常工作时，哨兵会开始自动故障转移操作，它会将失效主节点的其中一个从节点升级为新的主节点，并让其它从节点改为复制新的主节点。
  • 通知（提醒）：哨兵可以将故障转移的结果发送给客户端。

哨兵模式的构成

哨兵模式有两个节点构成：数据节点 和 哨兵节点

  • 哨兵节点：哨兵系统由一个或多个哨兵节点组成，哨兵节点是特殊的redis节点，不存储数据。（端口号为26379）
  • 数据节点：主节点和从节点都是数据节点。（端口号为6379）

Redis 群集模式

集群，即Redis Cluster，是Redis 3.0开始引入的分布式存储方案。

集群由多组节点(Node)组成，Redis的数据分布在这些节点组中。节点组中的节点分为主节点和从节点：只有主节点负责读写请求和集群信息的维护；从节点只进行主节点数据和状态信息的复制。

集群模式的作用

（1）高可用：集群支持主从复制和主节点的自动故障转移（与哨兵类似）；当任一节点发生故障时，集群仍然可以对外提供服务。

（2）数据分区：数据分区(或称数据分片)是集群最核心的功能。

Redis 集群的数据分片

Redis集群引入了哈希槽的概念
Redis集群有16384个哈希槽（编号0-16383）
集群的每组节点负责一部分哈希槽
每个Key通过CRC16校验后对16384取余来决定放置哪个哈希槽，通过这个值，去找到对应的插槽所对应的节点，然后直接自动跳转到这个对应的节点上进行存取操作

Redis 集群的工作流程

首先对操作的键使用CRC16算法进行换算得到一个数值，

然后除以16384取余数，得到这个键所对应的哈希槽位，

最后redis会跳转到这个哈希槽位所对应的node组的主节点上进行读写操作

摆烂的存在
关注
redis 主从 哨兵 集群部署
冲击
10-23 2187
Redis是当前比较热门的NOSQL系统之一，它是一个key-value存储系统。和Memcache类似，但很大程度补偿了Memcache的不足，它支持存储的value类型相对更多，包括string、list、set、zset和hash。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作。在此基础上，Redis支持各种不同方式的排序。
redis主从哨兵模式
m0_74895600的博客
06-25 992
Redis有三种集群方式：主从复制，哨兵模式和分布式集群
Redis 主从复制，哨兵与集群
weixin_56770318的博客
07-10 1278
虽然Redis可以实现单机的数据持久化，但无论是RDB也好或者AOF也好，都解决不了单点宕机问题，即一旦单台 redis服务器本身出现系统故障、硬件故障等问题后，就会直接造成数据的丢失此外,单机的性能也是有极限的,因此需要使用另外的技术来解决单点故障和性能扩展的问题。
redis主从哨兵和集群的区别
weixin_51711395的博客
08-10 330
redis主从哨兵和集群的区别
Redis主从、哨兵、集群
KarUo420的博客
08-21 1613
Sentinel的三个作用是什么？集群监控故障恢复状态通知Sentinel如何判断一个redis实例是否健康？每隔1秒发送一次ping命令，如果超过一定时间没有相向则认为是主观下线（sdown如果大多数sentinel都认为实例主观下线，则判定服务客观下线（odown故障转移步骤有哪些？首先要在sentinel中选出一个leader，由leader执行failover选定一个slave作为新的master，执行，切换到master模式然后让所有节点都执行slaveof新master。
Redis主从与哨兵架构详解
一个喜欢诗和远方的程序媛
06-03 733
Redis主从与哨兵架构详解
Redis主从、哨兵、集群讲解
wangwcy的博客
05-23 2221
哨兵模式，就是由一个或多个哨兵实例组成的哨兵系统，它可以监视所有的Redis主节点和从节点，并在被监视的主节点进入下线状态时，自动将下线主服务器属下的某个从节点升级为新的主节点。假如节点A标记节点B为主观下线，一段时间后，节点A通过消息把节点B的状态发到其它节点，当节点C接受到消息并解析出消息体时，如果发现节点B的pfail状态时，会触发客观下线流程；Gossip是一种谣言传播协议，每个节点周期性地从节点列表中选择 k 个节点，将本节点存储的信息传播出去，直到所有节点信息一致，即算法收敛了。
62、redis主从复制、哨兵、集群
m0_74149099的博客
07-31 961
主从切换技术的方法是：当服务器宕机后，需要手动一台从机切换为主机，这需要人工干预，不仅费时费力而且还会造成一段时间内服务不可用。为了解决主从复制的缺点，就有了哨兵机制。哨兵的核心功能：在主从复制的基础上，哨兵引入了主节点的自动故障转移。
Redis系列：Redis主从、哨兵、集群介绍
栗筝i的博客
11-12 4026
本篇内容包括：Redis 主从架构、Redis 哨兵架构、Redis 集群架构 的介绍等内容～
docker-compose redis主从哨兵 redis多节点高可用 redis集群高可用
04-12
这里我们将详细探讨如何利用Docker Compose部署Redis的主从哨兵配置和集群高可用性解决方案。 首先，Docker Compose是一个强大的工具，可以让我们通过YAML文件定义和运行多容器的Docker应用。在这个场景下，我们...
03_redis 主从复制 Redis集群和哨兵模式.docx
07-04
### Redis 主从复制、集群与哨兵模式详解 #### 一、Redis 主从复制 **主从复制**是Redis中最基础也是最常用的架构之一。它主要用于实现数据的冗余备份和读写分离。 ##### 1.1 主从模式概述 - **数据库分类**：在...
Redis主从、哨兵、 Cluster集群一锅端！
m0_73493267的博客
09-06 408
正在上传…重新上传取消Redis主从同步包括三个阶段。第一阶段：主从库间建立连接、协商同步。第二阶段：主库把数据同步到从库，从库收到数据后，完成本地加载。第三阶段，主库把新写的命令，发送到从库。1.3.1 主从数据不一致因为主从复制是异步进行的，如果从库滞后执行，则会导致主从数据不一致。主从数据不一致一般有两个原因：如何解决主从数据不一致问题呢？1.3.2 读取过期数据Redis删除数据有这几种策略：如果使用Redis版本低于3.2，读从库时，并不会判断数据是否过期，而是会返回过期数据。而3.2 版本后，R
Redis主从哨兵Cluster集群
秀强的专栏
04-19 572
文章目录redis单节点有什么问题？主备和主从区别是什么Redis集群原则主从复制搭建 redis单节点有什么问题？ 单点故障 容量有限 承受压力有限 主备和主从区别是什么 主备：客户端只访问主，主挂了，备顶上。 主从： Redis集群原则 AKF CAP 主从复制搭建 复制配置文件到test目录 修改配置文件 daemonize no / appendonly no / #logfile ...
CentOS 7系统下Redis Cluster集群一键部署脚本发布
最新发布
运维人生
11-02 190
环境准备：自动安装Redis所需的依赖包，并下载Redis源码。Redis安装：编译并安装Redis。配置文件生成：为每个Redis节点生成独立的配置文件。Redis实例启动：根据配置文件启动Redis实例。集群创建：使用redis-cli命令创建Redis Cluster集群。本文提供了一个在CentOS 7系统下Redis Cluster集群的一键部署脚本，帮助开发者快速搭建Redis Cluster集群。未来，我们将继续完善该脚本，增加更多的功能和配置选项，以满足不同场景下的需求。
docker部署nginx+nacos+redis+java镜像和容器
xiaogg3678的专栏
11-01 705
docker部署nginx+nacos+redis+java镜像和容器
短信登录的实现-redis和session的比较
2301_79748665的博客
10-29 794
我们之前只有一个拦截器，但是拦截的路径不是所有，如果用户一直访问的是不需要拦截的路径，那么他的token就不会刷新，就会失去登录状态，我们可以再加一个拦截器，第一个拦截一切路径，并且刷新有效期，第二个做登录校验；用户信息的key使用一个token来保存，一个是保证key的唯一性，一个是保证数据的安全性，因为token也就是key是要存在浏览器中的；因为session是存储在tomcat服务器中的，我们将来部署集群进行负载均衡，那么我们存储在一台tomcat服务器的数据无法实现共享；
【Redis：原理、架构与应用】
qq_42060170的博客
10-30 861
Redis（Remote Dictionary Server）是一款开源的内存数据库，以高性能和多样的数据结构著称，主要用作缓存系统、消息队列和会话管理等。它提供了丰富的数据结构，支持字符串、哈希、列表、集合等多种数据类型。Redis 具备快速读写、高可扩展性和灵活的数据持久化能力，是 NoSQL 数据库中的重要代表。Redis 将所有数据存储在内存中，因此访问速度极快，是处理高频、低延迟访问场景的理想选择。Redis 支持主从复制、哨兵、集群等高可用架构，能够在大规模分布式系统中实现高可靠性和数据冗余。
Redis中储存含LocalDateTime属性对象的序列化实现
Charles_Clark的博客
10-29 671
上面代码中配置 RedisTemplate 的序列化机制，以便能够序列化和反序列化包含 LocalDateTime 等 Java 8 时间类型的对象。•作用ObjectMapper 是 Jackson 库的核心类，用来将 Java 对象转换为 JSON 字符串，或者将 JSON 字符串解析为 Java 对象。Jackson 是一个非常流行的 JSON 序列化和反序列化库，ObjectMapper 是它的主要接口，用于处理复杂的对象和数据结构。•作用。
redis主从哨兵集群shell部署
06-26
Redis 主从哨兵集群是一种高可用的解决方案，它使用哨兵（Sentinel）来监控和管理主从节点。哨兵会自动检测并切换故障的主节点，保证服务的连续性。以下是在 shell 中部署 Redis 主从哨兵集群的基本步骤： 1. **...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值