Redis 入门到分布式 （八）Redis Sentinel

最新推荐文章于 2024-10-01 22:13:55 发布
最新推荐文章于 2024-10-01 22:13:55 发布
阅读量202 收藏 1
点赞数
分类专栏： # Redis 文章标签： redis redis sentine 主从复制高可用 Jedis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42405670/article/details/103182022
版权

个人博客网：https://wushaopei.github.io/    (你想要这里多有)

sentinel-目录

        主从复制高可用
        安装配置
        实现原理
        架构说明
        客户端连接
        常见开发运维问题

一、主从复制高可用

1、主从复制的作用？

  为主提供一个备份，当主服务器挂掉后，可以为客户端提供主服务器中完整的数据；

  为主服务器进行分流，将读操作放到从节点上。

2、主从复制高可用存在的问题？

手动故障转移

写能力和存储能力受限

3、手动故障转移：

如图，假如这时候master挂掉了， master向slave的复制也被断掉了，这对于我们连接master的客户端肯定会连接或者读写失败的。这对于连接或读写分离的策略，这里的读是正常的，但是数据的更新却是无法保证的。

解决方案：

发生以上问题后，要进行故障转移。首先，要选中一个客户端slave，让它执行slaveof no one，让它成为master；然后对于其余的slave让它们执行slaveof new master 从而向新的master进行数据同步，这样就完成了生成一个新的master和向它复制的过程。

同时，我们的客户端slave也会去读取新的master。

二、 redis sentinel

1、  Redis Sentinel架构：

首先，Redis Sentinel包含多个redis节点，其中包括一主一从或者一主多从等多个节点；同样包含有多个sentinel节点。

sentinel节点主要用于对redis节点的状态进行故障判断，对redis进行故障转移的处理以及对客户端进行通知的处理。

对于一个节点的失败是可以达到公平性，还可以保证高可用，因为当前某个sentinel节点挂了，还可以保证整个Senetinel结构是完美的。

2、Redis Sentinel故障转移：

  1. 多个Sentinel发现并确认master有问题
  2. 选举出一个sentinel作为领导
  3. 选出一个slave作为master
  4. 通知其余slave成为新的master的slave
  5. 通知客户端主从变化
  6. 等待老的master复活成为新master的slave

整个过程其实就是从手动故障配置转移改成由sentinel进行故障发现、故障处理转移、故障通知的机制。

Redis Sentinel可以进行多套master~slave的机制的监控；每套master~slave会使用一个master-name进行标识。

三、redis sentinel 安装

1、安装与配置

1）配置开启主从节点

2) 配置开启sentinel监控主节点。（sentinel是特殊的redis）

3）实际应该多机器

4）详细配置节点

2、案例：

有个master:master-7000,两个slave: slave-7001,slave-7002:

1）Redis主节点：

启动：

redis-server redis-7000.conf

配置：

port 7000

daemonnize yes

pidfile /var/run/redis-7000.pid

logfile "7000.log"

2) Redis从节点

启动 ：

  redis-server redis-7001.conf

  redis-server redis-7002.conf

配置：

slave-1:

port 7001

daemonnize yes

pidfile /var/run/redis-7001.pid

logfile "7001.log"

dir "/opt/soft/redis/data/"

slaveof 127.0.0.1 7000

slave-2:

port 7002

daemonnize yes

pidfile /var/run/redis-7002.pid

logfile "7002.log"

dir "/opt/soft/redis/data/"

slaveof 127.0.0.1 7000

3、sentinel主要配置

port ${port}

dir "/opt/soft/redis/data/"

logfile "${port}.log"

sentinel monitor mymaster 127.0.0.1 7000 2

sentinel down-after-milliseconds mymaster 30000

sentinel parallel-syncs mymaster 1

sentinel failover-timeout mymaster 180000

四、redis sentine安装演示1

1、配置主节点配置文件： redis-7000.conf

[root@VM_0_14_centos conf]# ll

total 0

[root@VM_0_14_centos conf]# vim redis-7000.conf

1）配置参数：

port 7000

daemonize yes

pidfile /var/run/redis-7000.pid

logfile "7000.log"

dir "/usr/local/redis/data/"

2）将redis-7000复制为从节点rediss-7001、redis-7002

[root@VM_0_14_centos conf]# sed "s/7000/7001/g" redis-7000.conf > redis-7001.conf

[root@VM_0_14_centos conf]# sed "s/7000/7002/g" redis-7000.conf > redis-7002.conf

[root@VM_0_14_centos conf]# ll

total 12

-rw-r--r-- 1 root root 106 Nov 11 14:53 redis-7000.conf

-rw-r--r-- 1 root root 106 Nov 11 14:54 redis-7001.conf

-rw-r--r-- 1 root root 106 Nov 11 14:54 redis-7002.conf

3）让redis-7001、redis-7002指向redis-7000主节点：

[root@VM_0_14_centos conf]# echo "slaveof 127.0.0.1 7000" >> redis-7001.conf

[root@VM_0_14_centos conf]#

[root@VM_0_14_centos conf]# echo "slaveof 127.0.0.1 7000" >> redis-7002.conf

[root@VM_0_14_centos conf]# ll

total 12

-rw-r--r-- 1 root root 106 Nov 11 14:53 redis-7000.conf

-rw-r--r-- 1 root root 129 Nov 11 14:55 redis-7001.conf

-rw-r--r-- 1 root root 129 Nov 11 14:55 redis-7002.conf

[root@VM_0_14_centos conf]# cat redis-7000.conf

port 7000

daemonize yes

pidfile /var/run/redis-7000.pid

logfile "7000.log"

dir "/usr/local/redis/data/"

[root@VM_0_14_centos conf]# cat redis-7001.conf

port 7001

daemonize yes

pidfile /var/run/redis-7001.pid

logfile "7001.log"

dir "/usr/local/redis/data/"

slaveof 127.0.0.1 7000

[root@VM_0_14_centos conf]# cat redis-7002.conf

port 7002

daemonize yes

pidfile /var/run/redis-7002.pid

logfile "7002.log"

dir "/usr/local/redis/data/"

slaveof 127.0.0.1 7000

2、启动主、从节点：

[root@VM_0_14_centos conf]# redis-server redis-7000.conf

[root@VM_0_14_centos conf]# redis-cli -p 7000 ping

PONG

[root@VM_0_14_centos conf]# redis-server redis-7001.conf

[root@VM_0_14_centos conf]# redis-cli -p 7001 ping

PONG

[root@VM_0_14_centos conf]# redis-server redis-7002.conf

[root@VM_0_14_centos conf]# redis-cli -p 7002 ping

PONG

3、查看主从节点端口及相关配置信息：

五、 redis sentinel 安装2

安装配置redis-sentinel：

1、创建sentinel.conf文件：

port 26379

dir /tmp

sentinel monitor mymaster 192.168.1.108 6379 2

sentinel auth-pass mymaster MySUPER--secret-0123passw0rd

sentinel down-after-milliseconds mymaster 30000

sentinel parallel-syncs mymaster 1

sentinel failover-timeout mymaster 180000

2、复制创建 redis-sentinel-26379.conf文件：

cat sentinel.conf | grep -v "#" | grep -v "^$" > redis-sentinel-26379.conf

3、主节点参数配置：

port 26379

daemonize yes

dir /usr/local/redis/data/

logfile "26379.log"

sentinel monitor mymaster 127.0.0.1 7000 2

sentinel down-after-milliseconds mymaster 30000

sentinel parallel-syncs mymaster 1

sentinel failover-timeout mymaster 180000

4、启动redis-sentinel-26379主节点：

[root@VM_0_14_centos conf]# /usr/bin/redis-sentinel redis-sentinel-26379.conf

5、查看主节点状态：

[root@VM_0_14_centos conf]# ps -ef | grep redis-sentinel

root     31610     1  0 15:31 ?        00:00:00 /usr/bin/redis-sentinel *:26379 [sentinel]

root     31699 25301  0 15:32 pts/0    00:00:00 grep --color=auto redis-sentinel

6、从sentinel端口26379启动:

[root@VM_0_14_centos conf]# redis-cli -p 26379

127.0.0.1:26379>

7、为两个从节点配置sentinel:

[root@VM_0_14_centos conf]# sed "s/26379/26380/g" redis-sentinel-26379.conf > redis-sentinel-26380.conf

[root@VM_0_14_centos conf]# sed "s/26379/26381/g" redis-sentinel-26379.conf > redis-sentinel-26381.conf

8、启动从节点的sentinel:

[root@VM_0_14_centos conf]# /usr/bin/redis-sentinel redis-sentinel-26380.conf

[root@VM_0_14_centos conf]# /usr/bin/redis-sentinel redis-sentinel-26381.conf

9、状态查看；

[root@VM_0_14_centos conf]# ps -ef | grep redis-sentinel

root     31610     1  0 15:31 ?        00:00:00 /usr/bin/redis-sentinel *:26379 [sentinel]

root     32545     1  0 15:38 ?        00:00:00 /usr/bin/redis-sentinel *:26380 [sentinel]

root     32556     1  0 15:38 ?        00:00:00 /usr/bin/redis-sentinel *:26381 [sentinel]

root     32582 25301  0 15:38 pts/0    00:00:00 grep --color=auto redis-sentinel

[root@VM_0_14_centos conf]# redis-cli -p 26381127.0.0.1:26381> info# Server

redis_version:3.0.7

redis_git_sha1:00000000

redis_git_dirty:0

redis_build_id:d709ac81eddea5b3

redis_mode:sentinel

os:Linux 4.9.87-linuxkit-aufs x86_64

arch_bits:64

multiplexing_api:epoll

gcc_version:4.8.5

process_id:202

run_id:0120cece7bbd3c8c6ae3f7c8530e7608efda863e

tcp_port:26381

uptime_in_seconds:62

uptime_in_days:0

hz:16

lru_clock:14510388

config_file:/opt/soft/redis-3.0.7/config/redis-sentinel-26381.conf

# Sentinel

sentinel_masters:1

sentinel_tilt:0

sentinel_running_scripts:0

sentinel_scripts_queue_length:0

master0:name=mymaster,status=ok,address=127.0.0.1:7000,slaves=2,sentinels=3

[root@VM_0_14_centos conf]# redis-cli -p 26380 info sentinel# Sentinel

sentinel_masters:1

sentinel_tilt:0

sentinel_running_scripts:0

sentinel_scripts_queue_length:0

master0:name=mymaster,status=ok,address=127.0.0.1:7000,slaves=2,sentinels=3

六、 java 客服端

  • 请求响应流程
  • Jedis
  • Redis-py
  • 直连？

1.服务高可用？

2.客户端高可用？

1、客户端实现基本原理-step1

首先，我们要获取所有的sentinel节点，因为我们不知道哪个sentinel节点是活的，哪个sentnel节点已经宕机，所以我们要获取所有的sentinel节点的集合。同时，我要获取所以的master，就需要获取所有的master-name。

然后去遍历sentinel集合，找到可用的sentinel节点，也就是可以被ping通的节点。

2、客户端实现基本原理-step2

通过sentinel节点的集合和masterName去sentine-k中去查询并返回可用master节点的真正可用信息。

3、客户端实现基本原理-step3

当我们的客户端获取到master节点的时候，它会执行一次role或rol replication进行一次验证，从而验证该节点是否是真的master节点

如果master节点发生了变化，那么，sentinel是感知的。因为谁是真正的master，是由他来决定的。

Sentinel和客户端进行通知的机制：它们内部采用的是发布订阅的方式实现的。

4、客户端接入流程：

  1） Sentinel 地址集合

  2）masterName

  3）不是代理模式

5、Jedis的使用：

JedisSentinelPool senntinelPool = new JedisSentinelPool(masterName,sentinelSet,poolConfig,timeout);
Jedis jedis = null;
try {
    jedis = redisSentinelPool.getResource();
    //jedis command
}catch(Exception e){
    logger.error(e.getMessage(),e);
}finally(
    if(jedis != null)
        jedis.close():
}
讲讲Redis中的分布式一致性协议
Harrison
07-15 2022
Redis是什么
Redis 设置日志
热门推荐
晓风的博客
10-17 2万+
1.找到Redis的配置文件 redis.conf; 2.打开该配置文件， vi redis.conf; 3.通过linux的查询命令找到 (loglevel下面)logfile " " ; 4.在冒号里面输入日志的路径，比如logfile “/usr/local/redis/log/redis.log”，其中log是新建的文件夹，redis.log也是新建的文件（有人说只要新建到文件夹就可以了...
Redis: Sentinel哨兵监控架构及环境搭建
最新发布
Wang的专栏
10-01 1550
在主从模式下，我们通过从节点只读模式提高了系统的并发能力并发不断增加，只需要扩展从节点即可，只要主从服务器之间，网络连接正常主服务器就会将写入自己的数据同步更新给从服务器，从而保证主从服务器的数据相同在这种架构下，它仍然是有一些缺点的，比如说它的可靠性保证不是很好，因为主从模式下，主节点故障了便无法提供写入的服务现在，我们通过哨兵来解决这个问题然后，主节点其实写的压力也是并没有被释放的包括主从之间的数据是相同的，它还有数据冗余一个问题后面集群也会解决这个问题。
Linux redis-Sentinel配置
程序新视界
04-25 2061
下载 下载地址：https://redis.io/download 在/usr/local/src目录下执行下载。 wget http://download.redis.io/releases/redis-3.2.8.tar.gz 安装 解压到/usr/local/src目录，放源码包。 tar xzf redis-3.2.8.tar.gz 创建目录/usr/local/redis: make...
Redis学习笔记-Sentinel
weixin_43394724的博客
11-21 1595
概述 哨兵Sentinel：主从故障切换的具体实现 分布式 也是Redis服务器，不提供数据服务 一般为单数 三个阶段 监控：同步信息 通知：保持联通 故障转移 发现问题 竞选负责人 优选新master 新master上任，其他slave切换master，原master作为slave故障回复后连接 监控阶段 用于同步所有节点-Sentinels的状态信息，并获取master、slave的信息 获取各个sentinel的状态（是否在线），新的sentinel上线会刷新所有sentinel的S
Redis无法加载配置文件中日志文件的解决方法
weixin_44575373的博客
06-29 2086
Can’t open the log file: Permission denied ‘logfile “/usr/local/redis/etc/redis6380.log”’ Can’t open the log file: Permission denied> 首先查看你的路径下有没有对应的日志文件了，若没有，在路径下执行 touch redis6380.log chmod 777 redis6380.log 接下来再运行redis-server redis.conf,应该就没错了 如果你目
分布式文件存储与数据缓存 Redis高可用分布式实践（2.1 Linux安装redis）
07-22
总结起来，"分布式文件存储与数据缓存 Redis高可用分布式实践"涉及到的关键技术点包括： - Redis的安装与配置 - 数据持久化（RDB和AOF） - 主从复制 - Redis Sentinel监控与故障转移 - Redis Cluster分布式集群 在...
Redis从入门到高可用分布式
03-26
第1章 Redis初识 第2章 API的理解和使用 第3章 Redis客户端的使用 ...第8章 Redis Sentinel 第9章 初识Redis Cluster 第10章 深入Redis Cluster 第11章 缓存设计与优化 第12章 Redis云平台CacheCloud 第13章 课程总结
Redis-Swarm分布式集群部署脚本
09-26
Redis-Swarm分布式集群是通过Docker Swarm模式来实现Redis的集群化部署，它结合了Docker容器编排的强大功能和Redis的数据存储特性。这个“Redis-Swarm分布式集群部署脚本”旨在帮助用户快速、便捷地在多台服务器上...
Redis学习笔记（五）-- Redis Sentinel
buxiangqumingzi的博客
01-25 165
Redis学习笔记（五）-- Redis SentinelRedis SentinelRedis Sentinel故障转移三个定时任务Sentinel模式下客户端实现原理 Redis Sentinel Redis Sentinel可以监控多套主从节点，实现故障自动转移和高可用。 Sentinel本质上也是Redis节点，区别在于开启了Sentinel模式。 Redis Sentinel故障转移 过...
Redis Sentinel初体验
珺珺去哪儿
03-26 710
自Redis增加Sentinel集群工具以来，本博主就从未尝试过使用该工具。最近在调研目前主流的Redis集群部署方案，所以详细地看了一遍官方对于Sentinel的介绍并在自己的台式机上完成了三Redis实例+三Sentinel实例的部署，这里做一下简单的总结。     首先，下载安装Redis。目前随Redis 2.8发布的Sentinel版本被antirez称为Sentinel 2，是在
linux daemonize 命令,Linux守护进程运行命令daemonize
weixin_39700215的博客
05-08 933
我们一般在编写服务器的时候都希望能让服务器在后台运行，而且能记录下这个服务器的pid，防止一个进程重复启动。之前我的方案是自己使用fork函数，将服务器运行成后台模式；并且在启动之前去检查配置文件中指定的pid文件中是否能读出pid信息，并且在当前的ps aux中查找这个pid的进程是否还活着。这样来判定服务器是否已经启动了。当正常启动完毕之后，将会把当前进程的pid写入文件。这样就能防止重复启动...
linux如何打开6379端口,Mac下本地26379端口映射到远程Ubuntu主机下的Redis服务6379端口中...
weixin_33272631的博客
05-01 1263
本文将介绍一方法，可以在局域网内 MacOS 下将本地 26379 端口映射到远程 Ubuntu 主机下的 Redis 服务 6379 端口中。被连接服务器操作系统是 Ubuntu 18.04 LTS，发起连接主机操作系统是 macOS Sierra 10.12。1、前言1]、本文介绍的配置方法，是在 MacOS 上通过 ssh 命令进行端口映射。2]、本方法将本地 26379 端口映射到远程 U...
redis--生产环境搭建--04--哨兵模式的安装和配置
zhou920786312的博客
02-18 841
redis–生产环境搭建–04–哨兵模式的安装和配置 前提 使用hd用户登陆 完成基础环境搭建 https://blog.csdn.net/zhou920786312/article/details/118212302 一、机器 如果设置Redis服务访问密码，各主从节点、哨兵节点都必须设置相同密码。 redis哨兵模式通过检测主从redis节点的健康状态，发现主节点故障后能发通知、从节点主动接管，实现故障自动切换，从而实现redis的高可用。 哨兵节点个数必须为奇数，至少要有1个节点；
Redis: redis-cli -p 26379
amadeus_liu2的博客
03-05 1327
可执行哨兵相关命令
Redis:Redis Sentinel
wangdamingll的博客
08-21 821
一、Redis Sentinel 的安装 检查一下自己的系统里面有没有安装redis-sentinel命令,如果没有 可以选择安装redis-sentinel: //我这里已经安装了 shell> which redis-sentinel /usr/bin/redis-sentinel //安装方法:(ubuntu18.04) shell> apt search redis | grep sentinel shell> apt install redis-sentinel shell
2019年 Redis从入门到高可用 分布式实战教程
03-11
Redis从入门到高可用 分布式实战教程，共140多节课程、 掌握redis主从、哨兵、集群 ，参数调优 目录： 9-9 原生安装-1.准备节点.mp4 9-8 原生安装.mp4 9-7 基本架构.mp4 9-6 虚拟槽哈希分布.mp4 9-5 一致性...
sentinel 的配置与使用
洞妖呼叫洞妖的博客
04-26 2085
sentinel 监控redis主从服务器 微信图片_20190320173137.png 复制redis安装目录下的sentinel.conf到当前redis下 [root@myserver redis]# cp /opt/redis-3.2.8/sentinel.conf sentinel.conf sentinel.conf 的配置说明 sentinel monitor mymaster...
Redis daemonize介绍
lcyaiym的专栏
08-08 1602
欢迎访问我的个人博客网站：http://www.yanmin99.com/ Redis daemonize介绍 一、Redis daemonize介绍 1、daemonize介绍 A、redis.conf配置文件中daemonize守护线程，默认是NO。 B、daemonize是用来指定redis是否要用守护线程的方式启动。 2、daemonize 设置yes或者no区...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值