第11章-Redis集群

已于 2022-09-05 10:09:36 修改
阅读量686 收藏
点赞数
分类专栏： 数据库 文章标签： redis 数据库 java
于 2022-09-04 19:57:10 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_52166656/article/details/126683373
版权

第11章Redis集群

文章目录

11.1问题

容量不够, redis 如何进行扩容?
并发写操作，redis 如何分摊?
另外,主从模式,薪火相传模式,主机宕机，导致ip地址发生变化,应用程序中配置
需要修改对应的主机地址、端口等信息。
之前通过代理主机来解决,但是redis3.0 中提供了解决方案。就是无中心化集群配置。

11.2什么是集群

Redis集群实现了对Redis的水平扩容,即启动N个redis节点,将整个数据库分布存储在这N个节点中,每个节点存储总数据的1/N。

Redis集群通过分区( partition )来提供一-定程度的可用性( availability ) :即使集群中有一部分节点失效或者无法进行通讯 ，集群也可以继续处理命令请求。

11.3删除持久化数据

将rdb,aof文件都删除掉。

11.4制作6个实例, 6379,6380,6381,6389,6390,6391

11.4.1配置基本信息

开启daemonize yes
Pid文件名字
指定端口
Log文件名字
Dump.rdb名字
Appendonly关掉或者换名字

首先先删掉以前的dump的文件，防止干扰
在这里插入图片描述在这里插入图片描述随便编辑一个文件redis6379.conf,删减配置
在这里插入图片描述

11.4.2redis cluster 配置修改

cluster-enabled yes 打开集群模式

cluster-config-file nodes-6379.conf设定节点配置文件名

cluster-node-timeout 15000设定节点失联时间,超过该时间(毫秒) , 集群自动进行主从切换。
在这里插入图片描述

11.4.3把剩余两个文件删除

在这里插入图片描述

11.4.4保留一个6379文件

在这里插入图片描述

11.4.5复制6379，修改剩下的5个端口

在这里插入图片描述

11.4.6修改剩余的5个文件内容

举例6380
在这里插入图片描述

11.4.7修改完成

在这里插入图片描述

11.4.8启动6个redis服务

在这里插入图片描述

11.4.9查看启动状态

在这里插入图片描述

11.4.10将六个节点合成一个集群

组合之前，请确保所有 redis 实例启动后，nodes-xxxx.conf 文件都生成正常

首先进入redis目录下的src目录
在这里插入图片描述
在这里插入图片描述

11.4.11输入以下代码

redis-cli --cluster create --cluster-replicas 1 192.168.200.130:6379 192.168.200.130:6380 192.168.200.130:6381 192.168.200.130:6389 192.168.200.130:6390 192.168.200.130:6391

在这里插入图片描述
在这里插入图片描述

11.5通过cluster nodes命令查看集群信息

在这里插入图片描述

11.6redis cluster如何分配这六个节点?

一个集群至少要有三个主节点。
选项 --cluster-replicas 1 表示我们希望为集群中的每个主节点创建一个从节点。
分配原则尽量保证每个主数据库运行在不同的 IP 地址，每个从库和主库不在一个 IP地址上。
在这里插入图片描述

11.7 什么是 slots

一个 Redis 集群包含 16384 个插槽（hash slot）， 数据库中的每个键都属于这 16384
个插槽的其中一个，
集群使用公式 CRC16(key) % 16384 来计算键 key 属于哪个槽， 其中 CRC16(key) 语句用于计算键 key 的 CRC16 校验和 。
集群中的每个节点负责处理一部分插槽。 举个例子， 如果一个集群可以有主节点，
其中：
节点 A 负责处理 0 号至 5460 号插槽。
节点 B 负责处理 5461 号至 10922 号插槽。
节点 C 负责处理 10923 号至 16383 号插槽。
在这里插入图片描述

11.8 在集群中录入值

在 redis-cli 每次录入、查询键值，redis 都会计算出该 key 应该送往的插槽，如果不是该客户端对应服务器的插槽，redis 会报错，并告知应前往的 redis 实例地址和端口。
在这里插入图片描述

redis-cli 客户端提供了 –c 参数实现自动重定向。 如 redis-cli -c –p 6379 登入后，再录入、查询键值对可以自动重定向。
不在一个 slot 下的键值，是不能使用 mget,mset 等多键操作。
在这里插入图片描述

11.9查询集群中的值

CLUSTER GETKEYSINSLOT <slot><count>
返回 count 个 slot 槽中的键。
在这里插入图片描述

11.10故障恢复

如果主节点下线？从节点能否自动升为主节点？注意：15 秒超时

演示：
先让6379停掉
在这里插入图片描述
连接到6380端口上
在这里插入图片描述
主节点恢复后，主从关系会如何？主节点回来变成从机。
在这里插入图片描述如果所有某一段插槽的主从节点都宕掉，redis 服务是否还能继续?
如果某一段插槽的主从都挂掉，而 cluster-require-full-coverage 为 yes ，那么 ，整个集群都挂掉
如果某一段插槽的主从都挂掉，而 cluster-require-full-coverage 为 no ，那么，该插槽数据全都不能使用，也无法存储。
redis.conf 中的参数 cluster-require-full-coverage

11.11集群的Jedis开发

即使连接的不是主机，集群会自动切换主机存储。主机写，从机读。
无中心化主从集群。无论从哪台主机写的数据，其他主机上都能读到数据。
在这里插入图片描述

11.12Redis集群提供了以下好处

  • 实现扩容
  • 分摊压力
  • 无中心配置相对简单

11.13Redis集群的不足

  • 多键操作是不被支持的
  • 多键的 Redis 事务是不被支持的。lua 脚本不被支持
  • 由于集群方案出现较晚，很多公司已经采用了其他的集群方案，而代理或者客户端分片的方案想要迁移至 redis cluster，需要整体迁移而不是逐步过渡，复杂度较大。

返回Redis目录

芙如东海
关注
专栏目录
第 8 章 Prometheus 监控 | 实战案例 - Redis 监控
甘蓝的专栏
09-12 8927
为 Redis (Single、Sentinel、Cluster) 安装 redis_exporter，实现对 Redis 的监控。
Redis主从加哨兵模式集群部署
赵广陆
04-21 1599
目录1 Redis版本特性介绍2 Redis集群配置3 主从复制4 集群扩容收容4.1 添加集群主节点4.2 哈希槽分配4.3 添加集群从节点4.4 缩容5 Redis Sentinel5.1 哨兵讲解5.2 Sentinel搭建5.3 Sentinel集群讲解6 集群部署3主3从6.1 Cluster集群结构设计6.2 Cluster集群结构搭建6.3 docker实战部署 1 Redis版本特性介绍 这里安装6个redis，配置如下： 小知识点(Redis6.0.5)： 如果需要安装单机版，需要安装
爬虫教程（ 4 ） --- 分布式爬虫 scrapy-redis、集群
墨鱼菜鸡
07-11 1053
1、分布式爬虫scrapy - redis scrapy 分布式爬虫 文档：http://doc.scrapy.org/en/master/topics/practices.html#distributed-crawls Scrapy 并没有提供内置的机制支持分布式(多服务器)爬取。不过还是有办法进行分布式爬取， 取决于您要怎么分布了。 如果您...
11-Docker-Redis集群部署
日拱一卒，默默努力
11-09 712
在工作环境中，我们常常被要求配置多种集群，Redis 集群是最常见的入门需要掌握的集群配置方法，在之前的学习中，我们学习掌握了分布式存储的算法，本质上集群的部署就是通过分布式存储算法将数据分发部署好的不同的容器，因此在本篇文章中我们重点学习三主三从的 Redis 集群的配置。
redis(10)-集群
qq_34821809的博客
04-17 202
redis集群
十三、Redis集群
weixin_44063529的博客
07-02 897
本文详细介绍了Redis集群的搭建和配置，包括问题背景、集群概念、节点制作、集群合成、数据分配、故障恢复以及Jedis开发等关键步骤。通过无中心化的方式实现水平扩容和高可用性，同时指出了集群模式下多键操作和事务的限制。文章提供了Redis集群的配置示例和命令使用，适合需要部署和管理Redis集群的开发者阅读。
使用spring-data-redis对redis集群进行KEY模糊删除的几种方式
敲代码真难呀。。
11-28 2343
环境：虚拟机3主3从 准备工作： 向redis cluster写入100W条数据 public void multiSet() { long start = System.currentTimeMillis(); //定义key对应的value Consumer consumer = new Consumer(); ...
【SpringBoot】整合Redis（使用spring-boot-starter-data-redis）
qq_27579471的博客
08-03 9894
前言 Jedis是Redis官方推荐的面向Java的操作Redis的客户端，而RedisTemplate是SpringDataRedis中对JedisApi的高度封装。SpringDataRedis相对于Jedis来说可以方便地更换Redis的Java客户端，比Jedis多了自动管理连接池的特性，方便与其他Spring框架进行搭配使用如：SpringCache。 Lettuce 和 Jedis 的都是连接Redis Server的客户端程序。Jedis在实现上是直连redis server，多线程环境下非线
阿里短信服务+Redis创建定时缓存
dys000000的博客
09-11 450
在这一章进行的操作是在java中引入阿里云的短信服务接口,在发送短信的时候将短信存进Redis缓存数据库中并且对缓存数据添加倒计时为五分钟将下方图示内容全部复制到java中, 创建一个新的.class文件 将下面内容复制进去即可之后将下方内容添进去注意将需要修改的地方修改为自己的下面根据下方所说对上面复制的接口代码进行修改1. CodeAPPCode 需要先登录 之后免费使用(购买)之后即可。
Redis
qq_59677536的博客
09-11 1348
redis数据库详解、安装步骤、操作命令
Redis 篇- 实战项目中使用 Redis 实现经典功能（异步秒杀商品、点赞功能、共同关注的好友、投喂功能）
小扳手
09-11 1736
查看消息的时候，按照时间来查看，从最新的时间到最旧的时间的顺序来进行查看，比如说，朋友圈，打开朋友圈最先看到的是最新的好友信息，用户查询自己的收件箱，比如像朋友圈，按照时间来排序好友发布的信息，而查看好友的朋友圈的时候，从上至下，来查看好友的消息。从用户集合中查询信息也不难，在实现的时候不就是直接去查看当前用户的收件箱，其实不然，需要考虑的细节还挺多的。
springboot luttuc redis 集成protobuf，手动序列化反序列化
IT_Octopus的博客
09-11 476
3.考虑到其他项目使用原生的luttuce，不支持key/value 结构不一致，所以对redis key field value 都进行压缩了（关注官网变更哦，后面会支持。路径一致，否则会报错。2.由于为了和公司其他的项目达成一致，所以版本，依赖 都尽量保证一致，所以版本需要各位看官具体决定了哈(团队使用时不同版本会有冲突)4.由于初期设计的.proto文件，可能存在压缩不完全的问题(后面会具体聊)，大家可以见仁见智了啊，欢迎反馈。这个是对可变的Map 进行压缩的，可能会压缩不完全。
KubeCon China 回顾｜快手的 100% 资源利用率提升：从裸机迁移大规模 Redis 到 Kubernetes
baidu_41642080的博客
09-10 1008
本文分享了如何将大规模的 Redis 实例从裸机迁移到 Kubernetes 上来提高资源的利用率
Redis 集群高可用详解及配置
TYM121380的博客
09-04 1956
Redis是一个开源的、遵循BSD协议的、基于内存的而且目前比较流行的键值数据库(key-value database)，是一个非关系型数据库Redis 提供将内存通过网络远程共享的一种服务，提供类似功能的还有memcached，但相比memcached，redis还提供了易扩展、高性能、具备数据持久性等功能。Redis 在高并发、低延迟环境要求比较高的环境使用量非常广泛。
Redis:缓存击穿
qq_62786439的博客
09-11 361
互斥锁实现方式：redis中setnx key value:改变对应key的value,仅当value不存在时执行，以此来实现互斥锁，防止出现锁得不到释放，设置有效期。线程一：未命中之后，获取互斥锁，再查询数据库重建缓存，写入缓存，释放锁。线程二：查询未命中，未获得锁(已由线程一获得)，等待一会，缓存命中。线程二：查询未命中，未获得锁(已由线程一获得)，返回过期数据。线程一：查询缓存，逻辑已过期，获取互斥锁，开启。：查询数据库并重建缓存，重置逻辑过期时间，释放锁。实现互斥锁相关的方法。
Redis 的数据持久化
ミカミミミ博客
09-11 631
Redis 的数据持久化的两种策略(AOF 和 RDB)
Redis的常见问题
ABU009的博客
09-11 274
#redis中的常见问问题
Redis Key的过期策略
最新发布
ArchManual 分布式技术架构手册
09-12 1189
Redis 的过期策略主要是指管理和删除那些设定了过期时间的键，以确保内存的有效使用和数据的及时清理。具体来说，Redis 有三种主要的过期策略：定期删除（Scheduled Deletion）、惰性删除（Lazy Deletion）和内存淘汰策略（Eviction Policies）。
Redis集群搭建与容灾策略详解
这时，Redis集群会尝试进行内部自动修复，例如，当一个主节点宕机，其对应的从节点会自动接管主节点的角色。 对于Redis集群的灾备，通常需要考虑以下策略： 1. 数据备份：定期对数据进行备份，以防数据丢失。 2. 跨...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值