10. Redis 集群

最新推荐文章于 2024-04-18 08:08:47 发布
最新推荐文章于 2024-04-18 08:08:47 发布
阅读量441 收藏
点赞数
分类专栏： Redis 文章标签： redis 数据库 nosql Redis 集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/D1179869625/article/details/125686811
版权

文章目录

10. Redis 集群

Redis 集群实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N。
Redis 集群通过分区（partition）来提供一定程度的可用性（availability）： 即使集群中有一部分节点失效或者无法进行通讯， 集群也可以继续处理命令请求

Redis 的哨兵模式基本已经可以实现高可用，读写分离 ，但是在这种模式下每台 Redis 服务器都存储相同的数据，很浪费内存，所以在redis3.0上加入了 Cluster 集群模式，实现了 Redis 的分布式存储，对数据进行分片，也就是说每台 Redis 节点上存储不同的内容；

在这里插入图片描述

这里的6台redis两两之间并不是独立的，每个节点都会通过集群总线(cluster bus)，与其他的节点进行通信。通讯时使用特殊的端口号，即对外服务端口号加10000。例如如果某个node的端口号是6379，那么它与其它nodes通信的端口号是16379。nodes之间的通信采用特殊的二进制协议。

对客户端来说，整个cluster被看做是一个整体，客户端可以连接任意一个node进行操作，就像操作单一Redis实例一样，当客户端操作的key没有分配到该node上时，Redis会返回转向指令，指向正确的node，这有点儿像浏览器页面的302 redirect跳转。

根据官方推荐，集群部署至少要 3 台以上的master节点，最好使用 3 主 3 从六个节点的模式。测试时，也可以在一台机器上部署这六个实例，通过端口区分出来。

10.1 测试规划

这里准备三台测试机，每台机器分别配置两个 server

ip端口
192.168.169.1506379
192.168.169.1506380
192.168.169.1516379
192.168.169.1516380
192.168.169.1526379
192.168.169.1526380

10.2 修改配置文件

修改 redis.conf 配置文件

注意：除去与端口相关的配置所有机器都是相同的，注意端口不通，与之相关的配置也不同

# 修改绑定地址，所有机器都可以访问
bind 0.0.0.0 -::1

# 关闭保护模式（这里我不知道是我误操作开启的还是默认就是开启的，后期在测）
protected-mode no

# 配置端口号（例如使用 6380 ，这里就需要改成 6380）
port 6379

# 配置后台启动
daemonize yes

# 这里注意根据端口号配置相对应的 pid 文件
pidfile /var/run/redis_6379.pid

# 配置 log 日志文件，便于后期查看日志
logfile "/opt/tools/redis/log/redis.log"

# 开启集群模式
cluster-enabled yes


# 配置集群模式对应的文件路径，这个在启动之后会自动生成，但是这个路径自定义比较好（例如这里的配置 cluster-config-file nodes-6379.conf 默认在 root 目录下生成
cluster-config-file nodes-6379.conf


其他的本次测试使用默认配置

10.2 启动 redis-server

# 借助 redis-tri.rb 工具可以快速的部署集群，随便在一台机器上执行
[root@master ~]# redis-cli --cluster create --cluster-replicas 1 192.168.169.150:6379 192.168.169.150:6380 192.168.169.151:6379 192.168.169.151:6380 192.168.169.152:6379 192.168.169.152:6380
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.169.151:6380 to 192.168.169.150:6379
Adding replica 192.168.169.152:6380 to 192.168.169.151:6379
Adding replica 192.168.169.150:6380 to 192.168.169.152:6379
M: ad83c675b1a31cf11616c84549880b51f34f886e 192.168.169.150:6379
   slots:[0-5460] (5461 slots) master
S: e50610618db79253f560120007e512d5c6fa1b08 192.168.169.150:6380
   replicates 20afbaf09cd75306d1b796659b25e360a28e6410
M: fdf6baa828932e3905aa155ba0ceb0c5bc476a3c 192.168.169.151:6379
   slots:[5461-10922] (5462 slots) master
S: ac27bc9ed55db193b39a56507f040bd8d837ef23 192.168.169.151:6380
   replicates ad83c675b1a31cf11616c84549880b51f34f886e
M: 20afbaf09cd75306d1b796659b25e360a28e6410 192.168.169.152:6379
   slots:[10923-16383] (5461 slots) master
S: d02f284d2d882e10f1be0eee58dc2713eff79a89 192.168.169.152:6380
   replicates fdf6baa828932e3905aa155ba0ceb0c5bc476a3c
Can I set the above configuration? (type 'yes' to accept): yes				# 这里会让人工确认，是否确认上述配置
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
.
>>> Performing Cluster Check (using node 192.168.169.150:6379)
M: ad83c675b1a31cf11616c84549880b51f34f886e 192.168.169.150:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: fdf6baa828932e3905aa155ba0ceb0c5bc476a3c 192.168.169.151:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: e50610618db79253f560120007e512d5c6fa1b08 192.168.169.150:6380
   slots: (0 slots) slave
   replicates 20afbaf09cd75306d1b796659b25e360a28e6410
S: ac27bc9ed55db193b39a56507f040bd8d837ef23 192.168.169.151:6380
   slots: (0 slots) slave
   replicates ad83c675b1a31cf11616c84549880b51f34f886e
M: 20afbaf09cd75306d1b796659b25e360a28e6410 192.168.169.152:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: d02f284d2d882e10f1be0eee58dc2713eff79a89 192.168.169.152:6380
   slots: (0 slots) slave
   replicates fdf6baa828932e3905aa155ba0ceb0c5bc476a3c
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

在这里插入图片描述

  • 登陆集群
[root@master ~]# redis-cli -c -p 6379

-c	表示集群模式登陆

在这里插入图片描述

# 如果使用 redis-cli -p 6379 登陆，会出现 moved 转移情况，当然在一定概率下也会写入成功，写入成功的数据就是使用的登陆的机器
[root@master ~]# redis-cli -p 6379
127.0.0.1:6379> set k6 v6
OK
127.0.0.1:6379> get k6
"v6"
127.0.0.1:6379> set k7 v7
OK
127.0.0.1:6379> set k8 v8
(error) MOVED 8331 192.168.169.151:6379
127.0.0.1:6379>

在这里插入图片描述

10.4 测试

  • 查看信息
127.0.0.1:6379> CLUSTER INFO
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:87
cluster_stats_messages_pong_sent:101
cluster_stats_messages_sent:188
cluster_stats_messages_ping_received:96
cluster_stats_messages_pong_received:87
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:188
total_cluster_links_buffer_limit_exceeded:0
127.0.0.1:6379> CLUSTER NODES				# 查看节点信息
fdf6baa828932e3905aa155ba0ceb0c5bc476a3c 192.168.169.151:6379@16379 master - 0 1655882789000 3 connected 5461-10922
e50610618db79253f560120007e512d5c6fa1b08 192.168.169.150:6380@16380 slave 20afbaf09cd75306d1b796659b25e360a28e6410 0 1655882789682 5 connected
ad83c675b1a31cf11616c84549880b51f34f886e 192.168.169.150:6379@16379 myself,master - 0 1655882787000 1 connected 0-5460
ac27bc9ed55db193b39a56507f040bd8d837ef23 192.168.169.151:6380@16380 slave ad83c675b1a31cf11616c84549880b51f34f886e 0 1655882788000 1 connected
20afbaf09cd75306d1b796659b25e360a28e6410 192.168.169.152:6379@16379 master - 0 1655882790706 5 connected 10923-16383
d02f284d2d882e10f1be0eee58dc2713eff79a89 192.168.169.152:6380@16380 slave fdf6baa828932e3905aa155ba0ceb0c5bc476a3c 0 1655882789000 3 connected
  • 写入数据
127.0.0.1:6379> set k1 v1
-> Redirected to slot [12706] located at 192.168.169.152:6379		# 这里指明了写入在那台机器上
OK
192.168.169.152:6379> get k1
"v1"
192.168.169.152:6379> set k2 v2
-> Redirected to slot [449] located at 192.168.169.150:6379
OK
192.168.169.150:6379> set k3 v3
OK
192.168.169.150:6379> set k4 v4
-> Redirected to slot [8455] located at 192.168.169.151:6379
OK
192.168.169.151:6379> set k5 v5
-> Redirected to slot [12582] located at 192.168.169.152:6379
OK
192.168.169.152:6379>

在这里插入图片描述

10.5 redis cluster 如何分配这六个节点?

注意：

  • 一个集群至少要有三个主节点。
  • 选项 --cluster-replicas 1 表示我们希望为集群中的每个主节点创建一个从节点。
  • 分配原则尽量保证每个主数据库运行在不同的IP地址，每个从库和主库不在一个IP地址上

10.6 什么是 slots

原文链接：https://juejin.cn/post/6844903850529259528

Redis Client Slots 命令用于当前的集群状态，以数组形式展示。

在这里插入图片描述

192.168.169.151:6379> CLUSTER SLOTS
1) 1) (integer) 0
   2) (integer) 5460
   3) 1) "192.168.169.150"
      2) (integer) 6379
      3) "ad83c675b1a31cf11616c84549880b51f34f886e"
      4) (empty array)
   4) 1) "192.168.169.151"
      2) (integer) 6380
      3) "ac27bc9ed55db193b39a56507f040bd8d837ef23"
      4) (empty array)
2) 1) (integer) 5461
   2) (integer) 10922
   3) 1) "192.168.169.151"
      2) (integer) 6379
      3) "fdf6baa828932e3905aa155ba0ceb0c5bc476a3c"
      4) (empty array)
   4) 1) "192.168.169.152"
      2) (integer) 6380
      3) "d02f284d2d882e10f1be0eee58dc2713eff79a89"
      4) (empty array)
3) 1) (integer) 10923
   2) (integer) 16383
   3) 1) "192.168.169.152"
      2) (integer) 6379
      3) "20afbaf09cd75306d1b796659b25e360a28e6410"
      4) (empty array)
   4) 1) "192.168.169.150"
      2) (integer) 6380
      3) "e50610618db79253f560120007e512d5c6fa1b08"
      4) (empty array)
192.168.169.151:6379>

 
 
 
 
 

Direct_
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
session存入redis实现集群登录
12-08
使用redis实现集群登录，将session存入redis，一个方法类，直接配置即可使用
SpringBoot集成Redis集群
09-28
SpringBoot集成Redis集群 在本文档中，我们将指导您如何在SpringBoot 2.X中集成Redis集群。下面是相关的知识点： 集成Redis集群的必要性 在实际应用中，使用Redis集群可以提高系统的可扩展性和可靠性。Redis集群...
redis集群登陆
weixin_30892763的博客
08-29 2491
如何登陆redis集群 redis-cli -h 10.12.4.45 -p 7000 -c -a alkdsjf134rj01 ip：10.12.4.45 集群中的一个点 -c 以集群方式登陆。cluster -a 密码。authority 转载于:https://www.cnblogs.com/934827624-qq-com/p/11429499.h...
Redis Cluster集群（二）_redis集群,可以用客户端命令登录某一台机器吗
最新发布
2401_83740189的博客
04-18 796
root@redis-cluster4 src]# ./redis-cli --cluster add-node 192.168.116.175:7007 192.168.116.175:7006 --cluster-slave --cluster-master-id 308320db4284c9b203aff1d3d9a145616856f681 #master的id。观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。开始修改配置文件略…
redis集群模式登陆
papaya的博客
03-07 2515
redis集群模式下连接
【Redis】集群
七秒钟的记忆
05-06 219
模拟了集群的搭建，以及简单的使用
Redis集群规范.docx
11-07
Redis 集群规范 Redis 集群规范是 Redis 分布式实现的规范文档，旨在介绍 Redis 集群的设计原理、功能特点和实现细节。该规范分为两个部分：第一部分介绍已经实现的功能，第二部分介绍未实现的功能。 Redis 集群是...
win10搭建redis集群.txt
04-28
在我们日常开发工作中，经常会用到redis技术，而我们一般都是使用单机版，但是现在云上环境大多使用集群模式，在开发过程中，如果本地不能连内网或云上redis，就不能很好的开发，本资源为win10本地搭建redis集群的全...
57.redis集群安装.docx
05-13
redis集群，命令： 所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.
stackexchange.redis.2.0.0
05-28
《深入理解StackExchange.Redis 2.0.0与Redis集群》 StackExchange.Redis是一个流行的.NET客户端库，用于与Redis缓存服务器进行交互。版本2.0.0是针对.NET Framework 4.6.1编译的，这表明它兼容.NET Framework的这...
RedisBus:.NET中基于Redis的简单总线消息系统
06-05
Redis总线 .NET中基于Redis的简单总线消息系统 创建它是为了帮助本地调试/集成测试，这些测试在内存 (REDIS) 中运行速度非常快，而不是实际的总线实现。 它支持广播和请求/响应消息传递样式以及在不同频道上广播的多频道支持。 它的创建是为了解决基于 CQRS 架构/模式的分布式解决方案。 许多解决方案在同一个线程上实现了内存总线，这是为我自己解决相同的线程问题。 它使用 StackExchange.Redis 与 Redis 交互。 请查看 ，了解如何在 .NET 中启动 Redis 实例，以便调试/测试，无需安装/了解 Redis。 查看包含的测试以获取更多实现想法。 播送 我们有2级不同的类别，RedisObserver和RedisBroker，您可以通过RedisBroker播放，您可以通过RedisObserver订阅。 连接到redis，默认是localhos
redis 分布式集群 登录令牌共享实现方案 采用redis 加mysql 实现一处登录 多处校验实现方案
银河系天城知识宝库_技术专家蒋浩宇
02-22 350
目录 介绍 实现方案 redis 配置方案 java配置 java 校验 监听器实现方案 redis 中用户令牌，数据存储方案 redis uitl 类 数据校验方案 发现一些路径地址的请求，就对地址进行权限校验即可 介绍 为支持服务用户量越来越多，设计分布式集群，在集群中登录和校验登录令牌，为一个重要的事情， 为实现又快又稳又方便的服务，所谓增加机器成本比增加开发成本要先考虑，于是设计如下方案 实现方案 1.使用redis 存储登录的令牌 和用户权限信息 2.如果有需要.
Linux上登录Redis集群,linux上搭建redis集群-Go语言中文社区
weixin_28926205的博客
05-14 450
redis集群的特点:1.机器多,能够保证redis服务器出现问题后,影响较小2.自备主从结构,自动的根据算法划分主从结构.动态的实现3.能够根据主从结构自动的实现高可用4.实现数据文件的备份1.首先在linux上安装redis2.在编译后的redis目录 cd /usr/local/redis创建9台服务器,实现3主6从,即一个zhu主机下有两个子节点mkdir 7000 7001 7002 7...
Redis集群部署一直卡在Waiting for the cluster to join ......（Redis集群总线配置）
weixin_30498921的博客
07-03 799
redis集群总线端口为redis客户端端口加上10000，比如说你的redis 6379端口为客户端通讯端口，那么16379端口为集群总线端口 我搭建的redis集群中端口号是从 7001 ~ 7006的，其中 7001、7003、7005 为主节点，7002、7004、7006为从节点；那么redis集群中总线端口为17001、17003、17005，如图所示： 所以，所有服务器的点需...
Redis 集群
Mr君的逆袭
02-28 239
Redis Cluster Redis Cluster 提供了一种 Redis 安装的方法，数据会在多个Redis节点之间自动分区。 Redis Cluster在分区期间还提供了一定程度的可用性。这实际上就是在某些节点出现故障或无法通信时继续操作的能力。但是，如果发生较大故障（例如，大多数节点不可用时），集群将停止运行。 Redis Cluster TCP 端口 每个Redis集群节点都需要打开两个TCP连接。一个用于服务客户端的常规Redis TCP端口，例如6379，另一个为在数据端口上加上10
redis集群搭建
java 菜鸟一枚
11-13 504
Redis的安装 1.1 安装redis前需要首先安装gcc，使用命令yum install –y gcc进行安装。 [root@localhost redis]# yum install -y gcc 1.2 将redis-3.2.0.tar.gz放在/home目录下，使用 tar –zxvf redis-3.2.0.tar.gz解压 [root@localhost home]# tar
Redis集群详解
热门推荐
怪咖@的博客
06-26 1万+
在了解Redis集群之前尽量先了解清楚Redis的主从复制和哨兵机制。读写分离，性能扩展，降低主服务器的压力容灾，快速恢复，主机挂掉时，从机变为主机Redis 主从模式不具备自动容错和恢复功能，如果主节点宕机，Redis 集群将无法工作，此时需要人为干预，将从节点提升为主节点。哨兵机制作用主要是监控主从节点，当主节点挂掉，通过内部投票机制，从 从节点当中选出一个主节点，这样可以避免人工成本。虽然主从+哨兵采用了多节点，但是他们存在的目的主要是解决容灾问题，而并非性能问题。
单点登陆与redis集群缓存
weixin_43862280的博客
11-25 224
单点登录SSO ​ 单点登录:SSO英文全称Single Sign On，单点登录。SSO是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。它包括可以将这次主要的登录映射到其他应用中用于同一个用户的登录的机制。它是目前比较流行的企业业务整合的解决方案之一。 ​ 单点登录解决的问题:分布式session的共享问题,简单的说是解决了一个服务器一登陆的问题,实现多功能系统的一次...
详解StackExchange.Redis通用封装类分享
08-31
首先，ConnectionMultiplexer是StackExchange.Redis的核心组件，它代表了到Redis服务器集群的一个连接池。由于其在整个应用程序中的重要性，通常会采用单例模式来管理一个ConnectionMultiplexer实例，确保在整个应用...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值