Redis 系列13--Redis 哨兵

最新推荐文章于 2023-03-13 10:36:02 发布
最新推荐文章于 2023-03-13 10:36:02 发布
阅读量818 收藏 1
点赞数
文章标签： redis java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fengxianaa/article/details/124409445
版权

上一篇：https://blog.csdn.net/fengxianaa/article/details/124409120

当主从集群下Master当宕机，Redis 的哨兵机制(Sentinel)会从Slave节点中选举一个新的Master

主要功能如下

（1）集群监控，负责监控redis master和slave是否正常工作
（2）故障转移，如果master node挂掉了，自动故障转移，从Slave节点中选举一个新的Master
（3）消息通知，如果某个redis实例有故障，那么哨兵负责发送消息作为报警通知给管理员

如果故障转移发生了，通知client客户端新的master地址

1. 集群监控

哨兵是基于心跳机制监控集群状态，每秒向集群中的实例发送ping命令

    • 如果某个哨兵节点发现某实例没在规定时间（is-master-down-after-milliseconds）响应，则该实例主观宕机(sdown)
    • 如果指定数量(quorum)的哨兵都认为这个实例宕机，则该实例客观宕机(odown)，quorum最好超过一半数量

上图中，一同有3个哨兵，其中2个都认为master宕机了，且quorum=2，那么这个master就是客观宕机，需要进行故障转移

2. 故障转移

一旦认为Master客观宕机，哨兵会在slave中选出一个最为新的Master，选举算法

  • 判断跟Master断开连接的时长，超过了down-after-milliseconds的10倍，排除这个slave
  • 判断salve的优先级，slave priority越低，优先级就越高
  • 如果slave priority相同，那么看replication offset，offset越大，优先级就越高
  • 如果上面两个条件都相同，那么选择一个run id比较小的

一旦确定Master节点后，会选择一个哨兵节点，进行故障转移

  • 给备选的slave发送slave no none 命令，让该节点成为Master
  • 给其他slave节点发送 slaveof <master IP> <master port> 命令，让这些slave成为新Master的从节点
  • 给故障的节点标记为slave，当节点恢复后，会自动成为从节点

3. 搭建哨兵集群

1. 配置

在 /root/soft/redis 目录下创建 3 个 文件夹

在 s1 中 创建 sentinel.conf 文件，并添加下面内容

# 哨兵 监听端口
port 27001
# 哨兵之间通信使用的ip地址
sentinel announce-ip 192.168.56.103
# 监控集群，格式：sentinel monitor <master name(可自定义)> <master ip> <master port> <quorum>
sentinel monitor mymaster 192.168.56.103 7001 2
# 主观判断指定时间内，节点是否宕机，单位：毫秒
sentinel down-after-milliseconds mymaster 5000
# 故障转移的超时时间，单位：毫秒,如果超时，再选一个slave进行切换
sentinel failover-timeout mymaster 60000
# 工作目录
dir "/root/soft/redis/s1"
# 密码配置，我没有设置密码
#sentinel auth-pass mymaster <password>


# 新的master别切换之后，同时有多少个slave被切换到去连接新master，重新做同步
# sentinel parallel-syncs mymaster 1
# 假设1个master，4个slave，然后master宕机了，4个slave中有1个切换成了master，剩下3个slave就要挂到新的master上面去
# 这个时候，如果parallel-syncs是1，那么3个slave，一个一个，排序挂接到新的master上面去
# 如果parallel-syncs是3，那么一次性就会把所有slave挂接到新的master上去

s2、s3类似

启动哨兵： redis-sentinel s1/sentinel.conf，启动前要保证redis实例已经启动

哨兵启动后，会互相通信

7001 日志

7002 日志

7003 日志

2. 测试

关闭 7001 主节点，从 3 个哨兵日志中，找到如下日志，我的是在s2中找到的

解释：

                                    客观认为 7001 宕机
24701:X 18 Apr 2022 22:48:18.502 # +sdown master mymaster 192.168.56.103 7001 
                                    主观认为 7001 宕机, 因为 quorum 2/2
24701:X 18 Apr 2022 22:48:18.603 # +odown master mymaster 192.168.56.103 7001 #quorum 2/2
                                    开始投票选出一个哨兵做故障转移，最终结果投票给 f5296605b9c786e377e4afb2fb93ded6094415e5
24701:X 18 Apr 2022 22:48:18.603 # +new-epoch 1
24701:X 18 Apr 2022 22:48:18.603 # +try-failover master mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:18.608 # +vote-for-leader f5296605b9c786e377e4afb2fb93ded6094415e5 1
24701:X 18 Apr 2022 22:48:18.617 # bf82c362a5d426a822d34327d5d1641683d683bc voted for f5296605b9c786e377e4afb2fb93ded6094415e5 1
24701:X 18 Apr 2022 22:48:18.618 # ed6cbda34457bf8d1f6e910e03362c6062a35061 voted for f5296605b9c786e377e4afb2fb93ded6094415e5 1
24701:X 18 Apr 2022 22:48:18.666 # +elected-leader master mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:18.666 # +failover-state-select-slave master mymaster 192.168.56.103 7001                       
                                    从集群中选择一个作为新的master,最终选择了 7002
24701:X 18 Apr 2022 22:48:18.721 # +selected-slave slave 192.168.56.103:7002 192.168.56.103 7002 @ mymaster 192.168.56.103 7001
                                    给 7002 发送了noone命令，让它成为主节点，查看下方图1
24701:X 18 Apr 2022 22:48:18.721 * +failover-state-send-slaveof-noone slave 192.168.56.103:7002 192.168.56.103 7002 @ mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:18.798 * +failover-state-wait-promotion slave 192.168.56.103:7002 192.168.56.103 7002 @ mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:19.719 # +promoted-slave slave 192.168.56.103:7002 192.168.56.103 7002 @ mymaster 192.168.56.103 7001
                                    重新配置7001，让其成为slave
24701:X 18 Apr 2022 22:48:19.719 # +failover-state-reconf-slaves master mymaster 192.168.56.103 7001
                                    通知7003 ，新的master是7002，查看下方图2
24701:X 18 Apr 2022 22:48:19.777 * +slave-reconf-sent slave 192.168.56.103:7003 192.168.56.103 7003 @ mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:20.724 * +slave-reconf-inprog slave 192.168.56.103:7003 192.168.56.103 7003 @ mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:20.724 * +slave-reconf-done slave 192.168.56.103:7003 192.168.56.103 7003 @ mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:20.796 # -odown master mymaster 192.168.56.103 7001
24701:X 18 Apr 2022 22:48:20.796 # +failover-end master mymaster 192.168.56.103 7001                 
24701:X 18 Apr 2022 22:48:20.796 # +switch-master mymaster 192.168.56.103 7001 192.168.56.103 7002
24701:X 18 Apr 2022 22:48:20.796 * +slave slave 192.168.56.103:7003 192.168.56.103 7003 @ mymaster 192.168.56.103 7002
24701:X 18 Apr 2022 22:48:20.796 * +slave slave 192.168.56.103:7001 192.168.56.103 7001 @ mymaster 192.168.56.103 7002
24701:X 18 Apr 2022 22:48:25.853 # +sdown slave 192.168.56.103:7001 192.168.56.103 7001 @ mymaster 192.168.56.103 7002

图1:

图2:

这时候再次重启 7001 ，然后查看7002日志，发现7001请求同步数据

查看7001日志，作为一个slave，连接7002

4. redisTemplate

redisTemplate感知redis故障转移

修改之前 properties 文件

# master 名称
spring.redis.sentinel.master=mymaster
# 哨兵地址
spring.redis.sentinel.nodes[0]=192.168.56.103:27001
spring.redis.sentinel.nodes[1]=192.168.56.103:27002
spring.redis.sentinel.nodes[2]=192.168.56.103:27003

增加一个bean配置

/**
* 配置读写分离
* @return
*/
@Bean
public LettuceClientConfigurationBuilderCustomizer configurationBuilderCustomizer(){
    return clientConfigurationBuilder -> clientConfigurationBuilder.readFrom(ReadFrom.REPLICA_PREFERRED);
}

代码中的 ReadFrom.REPLICA_PREFERRED 是redis的读取策略，有下面几种

  • MASTER 从master读取
  • MASTER_PREFERRED 优先 master 读取，master不可用，读 slave
  • REPLICA 从 slave 读取
  • REPLICA_PREFERRED 优先从 slave 读取，slave不可用，读master

Controller

@Autowired
private StringRedisTemplate stringRedisTemplate;

@GetMapping("/set")
public String set(@RequestParam String key , @RequestParam String value){
    stringRedisTemplate.opsForValue().set(key, value);
    return "success";
}

@GetMapping("/get")
public String get(@RequestParam String key){
    return stringRedisTemplate.opsForValue().get(key);
}

正常访问，没问题，如果停掉7002 ，再次访问，也是正常的

5. 两种数据丢失

  • 异步复制导致的数据丢失
    • 因为master -> slave的复制是异步的，所以可能有部分数据还没复制到slave，master就宕机了，此时这些部分数据就丢失了
  • 脑裂导致的数据丢失
    • 脑裂，也就是说，某个master所在机器突然脱离了正常的网络，跟其他slave机器不能连接，但是实际上master还运行着
    • 此时哨兵可能就会认为master宕机了，然后开启选举，将其他slave切换成了master
    • 这个时候，集群里就会有两个master，也就是所谓的脑裂
    • 虽然某个slave被切换成了master，但是可能client还没来得及切换到新的master，还继续写向旧master的数据可能也丢失了

解决：

  • min-replicas-to-write 1
    • 写数据时，如果跟 master 正常同步的 slave 数量小于1，则 master 拒绝写入
    • 配置0，则关闭此功能
  • min-slaves-max-lag 10
    • 主从库间进行数据复制时，从库给主库发送 ACK 消息的最大延迟，单位：秒
    • 如果大于10秒，则 master 拒绝写入

这两个配置可以有效避免数据的丢失

fengxianaa
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
redis---哨兵模式
08-19
redis---哨兵模式
Redis学习：主从复制和哨兵模式
Doudou_4174的博客
01-30 137
Redis主从复制、哨兵模式讲解及详细实现步骤
redis主从复制
博客的博客
10-14 636
⚪从服务器主动进行的操作 当从服务器连接上主服务器之后，从服务器 向 主服务器 发送进行数据同步的消息 主服务器接到从服务器发送过来的同步消息，把主服务器数据进行持久化rdb文件，把rdb文件发送到从服务器，从服务器拿到rdb进行读取 ⚪主服务器主动进行的操作 3.每次主服务器进行写操作之后，和从服务器进行数据同步
Redis的复制(Master/Slave)
weixin_43365083的博客
08-14 625
Redis的复制(Master/Slave)
Redis哨兵模式启动30秒后日志出现+sdown slave和+sdown master或+sdown sentinel
m0_64284147的博客
07-24 3375
2】各服务器之间不能互相访问，导致部署在各服务器上的redis不能互相通讯，从而在启动哨兵后导致sdownslave和sdownmaster（我这里的哨兵集群使用内网互相访问，若内网之间不能互相访问，也会导致sdownslave和sdownmaster）【1】安全组或防火墙没开放6379端口，导致master和slave之间不能通讯，从而在启动哨兵后导致sdownslave和sdownmaster。【1】给安全组添加规则，开放26379端口（我使用的是华为云，配置仅供参考）......
redis哨兵
PacosonSWJTU的博客
03-09 825
【0】redis 集群信息， 参见： redis集群 【1】启动哨兵进程 1）编辑哨兵启动配置文件 在redis_home 目录添加 redis-sentinel.conf 文件， 并修改 其监控的主数据库信息， 如下： sentinel monitor mymaster 192.168.186.100 6379 1  其中， mymaster是监控的主数据库的名称，可以自定
tomcat-cluster-redis-session-manager:Tomcat集群Redis会话管理器Java客户端
05-11
支持Redis默认，哨兵和集群模式（基于配置）。 展望未来，我们无需在Load Balancer中启用粘性会话（JSESSIONID）。 支持： Apache Tomcat 7 Apache Tomcat 8 Apache Tomcat 9 Apache Tomcat 10 资料下载： ...
07 redis高可用-哨兵模式1
08-08
只有一个 Sentinel进程将实例标记为主观下线并不一定会引起实例的自动故障迁移：只有在足够数量的Sentinel都将一个实例标记为主观下线之后，实例才会被标
Redis 哨兵模式 ---集群（windows环境）.pdf
08-17
在windows 环境下搭建redis哨兵模式。
docker-compose redis主从哨兵 redis多节点高可用 redis集群高可用
04-12
docker-compose 形式部署 redis 1主2从3哨兵 redis 多节点高可用 redis 主从哨兵 redis 集群高可用 redis 哨兵 redis 高可用
centos7下redis6哨兵配置
m0_67900727的博客
03-15 439
Tips: 在运行 Sentinel 时必须使用配置文件，因为系统将使用该文件来保存在重启时将重新加载的当前状态。如果没有给出配置文件或配置文件路径不可写，Sentinel 将简单地拒绝启动。 Tips: Sentinel 默认运行侦听 TCP 端口 26379 的连接，因此要使Sentinel 工作，您的服务器的端口 26379必须打开以接收来自其他 Sentinel 实例的 IP 地址的连接。否则哨兵不能通话，也不能就该做什么达成一致，所以永远不会执行故障转移。 测试环境 192.168.1
Redis哨兵模式主服务器宕机后每次选举选举仍然选挂掉的主服务器错误failover-state-select-slave master mymaster报错原因即解决方案
Menghu98621的博客
04-06 1621
报错原因：没有开放所有主从服务器和哨兵节点的端口。 解决方案：开放窗口或关闭防火墙：执行systemctl stop firewalld.service命令。
Redis3.0 主从复制及哨兵配置
Autism、陌亡
01-30 731
Redis3.0 主从复制及哨兵配置 1.安装Redis #命令步骤 yum -y install cpp binutils glibc glibc-kernheaders glibc-common glibc-devel gcc make gcc-c++ libstdc++-devel tcl   mkdir -p /usr/local/src/
Redis配置哨兵
山海散客
08-18 81
对主从服务器进行监控，redis2.6之后提供了“哨兵”机制。 监控Redis系统的运行状况，两点功能： 监控主数据库和从数据库是否运行正常...
第二弹、window下配置redis的一主二从三哨兵模式
素剑步青尘
05-21 4761
1.首先把你下载的redis复制两份出来，我的分别如下命名 Redis-master Redis-slave1 Redis-slave2
Redis 哨兵模式下，Master节点宕机后，进行故障转移的过程
爱喝咖啡的程序员的博客
09-13 5649
有三台服务器 S1：192.168.50.121 S2：192.168.50.122 S3：192.168.50.123 其中S1、S2上部署了Redis服务和Redis sentinel，S3上只部署了Redis sentinel。 假设S1是Master，突然宕机，在经过一段时间后(down_after_milliseconds)，可以看到控制台输出如下语句: 1.+sdown master mymaster 192.168.50.121 6379 当前哨兵认为master已经主..
-failover-abort-no-good-slave master
weixin_64161454的博客
03-13 844
-failover-abort-no-good-slave masterr 在搭建redis哨兵监听集群状态时出现这个错误这个错误的意思表示选择附属从节点，转换主节点是出了错误，原因是没有好的从节点，根本原因就是没有找到从节点信息，出现这个错误的根本原因是在于我们的哨兵配置文件写错了
redis 一主二从三哨兵的搭建
聆听。。花开雨落的博客
05-02 336
环境准备 三台独立的linux主机 内网IP分别为:172.31.175.142、172.31.175.143、172.31.175.144 分别创建带主目录的普通用户,比如useradd wx -m 安装redis 分别在各个主机上安装redis,以172.31.175.142为例,步骤如下 #下载4.0稳定版 wget http://download.redis.io/rel...
redis哨兵启动master sdown
秦怀杂货店
05-24 3322
搭建好哨兵之后，哨兵一启动，过了30秒就会判断master sdown: [root@cache01 ~]# redis-sentinel /etc/sentinal/5000.conf 1239:X 23 May 01:40:00.457 * Increased maximum number of open files to 10032 (it was originally set to 1024). _._
redis-cli连接redis哨兵
最新发布
12-15
可以使用以下命令连接到Redis哨兵： ``` redis-cli -h <sentinel_host> -p <sentinel_port> -a <sentinel_password> sentinel get-master-addr-by-name <master_name> ``` 其中，`<sentinel_host>`是哨兵的主机名或IP地址，`<sentinel_port>`是哨兵的端口号，`<sentinel_password>`是哨兵的连接密码，`<master_name>`是要连接的主服务器的名称。 例如，如果哨兵的主机名为`sentinel.example.com`，端口号为`26379`，连接密码为`password`，要连接的主服务器名称为`mymaster`，则可以使用以下命令连接到Redis哨兵： ``` redis-cli -h sentinel.example.com -p 26379 -a password sentinel get-master-addr-by-name mymaster ``` 该命令将返回主服务器的IP地址和端口号，可以使用这些信息连接到主服务器。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值