RedisCluster集群之动态增删节点

最新推荐文章于 2023-09-01 21:12:05 发布
最新推荐文章于 2023-09-01 21:12:05 发布
阅读量331 收藏 1
点赞数
文章标签： 数据库 python 数据结构与算法
原文链接：https://my.oschina.net/gmarshal/blog/2052817
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

RedisCluster集群之动态增删节点

前言：之前我们尝试搭建了cluster集群，并且通过redis-cli客户端查看了集群状态，下面我们将会继续介绍如何动态添加节点与删除节点。

预先准备内容：新增两个节点，并启动（步骤与前一文6个节点服务类似）

一、动态添加集群节点

计划添加 7007与7008两个节点服务，并且分别对应master与slave。

./src/redis-server cluster-config/7007/redis.conf
./src/redis-server cluster-config/7008/redis.conf

1.1 先添加Master节点（7007）

1.1.1 新增节点

利用 redis-trib.rb 的命令 add-node newIP:port oldIP:port

# 第一个IP为新添加的节点IP地址，第二个IP为当前集群中已经存在的任意一个节点，主要是为了建立关系
./src/redis-trib.rb add-node 127.0.0.1:7007 127.0.0.1:7001

输出

>>> Adding node 127.0.0.1:7007 to cluster 127.0.0.1:7001
>>> Performing Cluster Check (using node 127.0.0.1:7001)
M: 44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001
   slots:0-5460 (5461 slots) master
   1 additional replica(s)
M: 0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003
   slots:10923-16383 (5461 slots) master
   1 additional replica(s)
S: ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004
   slots: (0 slots) slave
   replicates 0d68dfae22060574a19712f2b6ee2608dbf1b471
S: bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005
   slots: (0 slots) slave
   replicates 44c678a77a5181b99f6fe0a5e24a98462d687288
S: 88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006
   slots: (0 slots) slave
   replicates 83e9712ba4520f949119b21a4ebb3de2d66ed2a0
M: 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002
   slots:5461-10922 (5462 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 127.0.0.1:7007 to make it join the cluster. 
[OK] New node added correctly. // 提示新的节点成功加入

客户端连接查看nodes节点

./src/redis-cli -c -h 127.0.0.1 -p 7001
127.0.0.1:7001> cluster nodes
0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003@17003 master - 0 1537151595086 3 connected 10923-16383
ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004@17004 slave 0d68dfae22060574a19712f2b6ee2608dbf1b471 0 1537151596091 4 connected
bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005@17005 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537151595086 5 connected
88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006@17006 slave 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 0 1537151595588 6 connected
// 新节点，master，没有槽点
b062c61070542120c4cc6d6bb1e9c800a28f1be7 127.0.0.1:7007@17007 master - 0 1537151594000 0 connected
83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002@17002 master - 0 1537151594077 2 connected 5461-10922
44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001@17001 myself,master - 0 1537151594000 1 connected 0-5460

会发现新添加的节点为master，但是并没有分配槽点

// 与其他master相比，没有槽点信息
b062c61070542120c4cc6d6bb1e9c800a28f1be7 127.0.0.1:7007@17007 master - 0 1537151594000 0 connected
1.1.2 分配槽点

重新分片 reshard

./src/redis-trib.rb reshard 127.0.0.1:7007

提示

// 打算分配多少槽点给当前节点
How many slots do you want to move (from 1 to 16384)?

输入 200 （意思是给当前节点分配200个槽点）

// 接收节点的ID是多少，也就是当前节点的ID
What is the receiving node ID?

输入 b062c61070542120c4cc6d6bb1e9c800a28f1be7

// 这里支持从所有节点平均分配槽点，以及从指定节点分配槽点两种方式
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1: // 这里输入槽点来源节点的ID，已done结束，或all（如果是all，则表示从所有节点获取）

这里提示 Source node #1: 我们输入 7001 对应的ID，回车后，输入 done 执行提交

Source node #2: done

回车后会展示分配计划，并提问是否确认分片计划

Do you want to proceed with the proposed reshard plan (yes/no)? yes

输入 yes 即可。

此时新节点添加完成，下面我们验证一下

1.1.3 验证节点

进入客户端，并输入 cluster nodes 得出如下内容

0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003@17003 master - 0 1537152323501 3 connected 10923-16383
ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004@17004 slave 0d68dfae22060574a19712f2b6ee2608dbf1b471 0 1537152323198 4 connected
bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005@17005 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537152322000 5 connected
88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006@17006 slave 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 0 1537152322190 6 connected
// 7007 多出 0-199
b062c61070542120c4cc6d6bb1e9c800a28f1be7 127.0.0.1:7007@17007 master - 0 1537152322000 7 connected 0-199
83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002@17002 master - 0 1537152323098 2 connected 5461-10922
// 7001 少了0-199，变为200-5460
44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001@17001 myself,master - 0 1537152323000 1 connected 200-5460
  • 7007节点的后面比之前多出了 0-199 的内容，标识分配0~199共200个槽点。
  • 7001节点少了200个节点（现在的范围是200~5460）

1.2 先添加Slave节点（7008）

1.2.1 新增节点

利用 redis-trib.rb 的命令 add-node 添加节点

./src/redis-trib.rb add-node 127.0.0.1:7008 127.0.0.1:7001

通过上面我们已经知道，新添加的节点是master，这里我们需要将7008节点变为7007节点的slave节点

1.2.2 切换身份

客户端连接进入7008

./src/redis-cli -c -h 127.0.0.1 -p 7008

将7008节点变为7007节点的slave节点

# 最后输入的是 目标Master对应的IP
127.0.0.1:7008> cluster replicate b062c61070542120c4cc6d6bb1e9c800a28f1be7

至此，slave节点已经添加完成了

1.2.3 验证节点

进入客户端，并输入 cluster nodes 得出如下内容

b062c61070542120c4cc6d6bb1e9c800a28f1be7 127.0.0.1:7007@17007 master - 0 1537153050731 7 connected 0-199
bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005@17005 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537153049000 1 connected
88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006@17006 slave 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 0 1537153049522 2 connected
ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004@17004 slave 0d68dfae22060574a19712f2b6ee2608dbf1b471 0 1537153050227 3 connected
83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002@17002 master - 0 1537153049000 2 connected 5461-10922
44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001@17001 master - 0 1537153050000 1 connected 200-5460
0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003@17003 master - 0 1537153049522 3 connected 10923-16383
// 变为Slave
99496d346dd4ab3b1b40ec1b802245a80ab9b1cd 127.0.0.1:7008@17008 myself,slave b062c61070542120c4cc6d6bb1e9c800a28f1be7 0 1537153049000 0 connected

可见当前节点（7008）已成为Slave

二、动态删除集群节点

2.1 删除Master节点（7007）

2.1.1 移出槽点

步骤与分配槽点一样

输入重新分片命令

./src/redis-trib.rb reshard 127.0.0.1:7007

提示

// 移出200
How many slots do you want to move (from 1 to 16384)?  200
// 输入接收槽点的节点的ID，这里输入的是7001的ID
What is the receiving node ID? 44c678a77a5181b99f6fe0a5e24a98462d687288
// 输入移出槽点的节点的ID，这里先输入7007的ID
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
// 输入7007的ID
Source node #1:b062c61070542120c4cc6d6bb1e9c800a28f1be7
// 输入done执行指定节点的模式提交，all表示从所有节点上面平均分配
Source node #2:done
// 是否执行重新分片计划，输入yes
Do you want to proceed with the proposed reshard plan (yes/no)? yes

此时通过客户端查看 cluster nodes

// 7007 这里没有了之前的槽点
b062c61070542120c4cc6d6bb1e9c800a28f1be7 127.0.0.1:7007@17007 master - 0 1537153624000 7 connected 
bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005@17005 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537153624350 8 connected
88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006@17006 slave 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 0 1537153625000 2 connected
ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004@17004 slave 0d68dfae22060574a19712f2b6ee2608dbf1b471 0 1537153625565 3 connected
83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002@17002 master - 0 1537153625565 2 connected 5461-10922
// 7001 恢复如初
44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001@17001 master - 0 1537153623846 8 connected 0-5460 
0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003@17003 master - 0 1537153625000 3 connected 10923-16383
99496d346dd4ab3b1b40ec1b802245a80ab9b1cd 127.0.0.1:7008@17008 myself,slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537153625000 0 connected

可见

  • 7007节点的槽点已经没有了，此时7007节点的数据已经迁移完毕，可以随时删除7007节点。
  • 7001节点的槽点已经恢复为0-5460了。
2.1.2 集群移除节点

直接使用命令 del-node ip:port id

./src/redis-trib.rb del-node 127.0.0.1:7007 b062c61070542120c4cc6d6bb1e9c800a28f1be7

提示如下，说明删除成功

>>> Removing node b062c61070542120c4cc6d6bb1e9c800a28f1be7 from cluster 127.0.0.1:7007
>>> Sending CLUSTER FORGET messages to the cluster...
>>> SHUTDOWN the node.
2.1.3 验证结果

进入客户端输入命令 cluster nodes

0d68dfae22060574a19712f2b6ee2608dbf1b471 127.0.0.1:7003@17003 master - 0 1537154183000 3 connected 10923-16383
ca9146ea9ce9ef7aa60ac2511f90bd91677285ff 127.0.0.1:7004@17004 slave 0d68dfae22060574a19712f2b6ee2608dbf1b471 0 1537154183391 4 connected
bb5f01c7e82348e6c90ce7da209696d02e06546b 127.0.0.1:7005@17005 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537154183592 8 connected
88a52d61d4c5f5ee00551a546460697bf9f1c475 127.0.0.1:7006@17006 slave 83e9712ba4520f949119b21a4ebb3de2d66ed2a0 0 1537154183000 6 connected
83e9712ba4520f949119b21a4ebb3de2d66ed2a0 127.0.0.1:7002@17002 master - 0 1537154183895 2 connected 5461-10922
99496d346dd4ab3b1b40ec1b802245a80ab9b1cd 127.0.0.1:7008@17008 slave 44c678a77a5181b99f6fe0a5e24a98462d687288 0 1537154182080 8 connected
44c678a77a5181b99f6fe0a5e24a98462d687288 127.0.0.1:7001@17001 myself,master - 0 1537154182000 8 connected 0-5460

发现7007成功移除了

2.2 删除Slave节点（7008）

slave节点，直接移除即可

./src/redis-trib.rb del-node 127.0.0.1:7008 99496d346dd4ab3b1b40ec1b802245a80ab9b1cd

三、综上

至此，实现动态添加、删除节点的功能。

我们总结一下添加和删除的步骤

添加节点

  • 添加Master节点
    • 加入集群：使用 redis-trib.rb add-node newIP:port oldIP:port
    • 分配槽点：使用 redis-trib.rb reshard ip:port 进行重新分片
  • 添加Slave节点
    • 加入集群：使用 redis-trib.rb add-node newIP:port oldIP:port
    • 更换角色：客户端连接进入当前节点，cluster replicate masterIP

删除节点

  • 删除Master节点
    • 移出槽点：使用redis-trib.rb reshard ip:port 进行重新分片，并移出
    • 移出集群：使用redis-trib.rb del-node ip:port id
  • 删除Slave节点
    • 移出集群：使用redis-trib.rb del-node ip:port id

博客

开源中国博客地址

https://my.oschina.net/gmarshal

个人博客地址

http://blog.foruo.top

欢迎关注我的个人微信订阅号：（据说这个头像程序猿专用）

输入图片说明

转载于:https://my.oschina.net/gmarshal/blog/2052817

weixin_33953384
关注
14.redis cluster集群增加节点和删除节点
qq_34953582的博客
06-12 312
redis cluster集群增加节点和删除节点
Redis——Redis Cluster集群原理
庄小焱
03-14 4621
摘要 我们平时习惯于使用 Rabbitmq 和 Kafka 作为消息队列中间件，来给应用程序之间增加异步消息传递功能。这两个中间件都是专业的消息队列中间件，特性之多超出了大多数人的理解能力。使用过 Rabbitmq 的同学知道它使用起来有多复杂，发消息之前要创建 Exchange，再创建 Queue，还要将 Queue 和 Exchange 通过某种规则绑定起来，发消息的时候要指定 routingkey，还要控制头部信息。消费者在消费消息之前也要进行上面一系列的繁琐过程。但是绝大多数情况下，虽然我们的消息
Redis-Cluster集群操作--添加节点、删除节点
最新发布
冲冲冲
09-01 2739
修改内容在上个集群部署的博客中。加入解析/etc/hosts。
【redis】集群伸缩（添加删除节点）
Big Smile
09-16 3949
注：本文知识点全部来自于《redis开发与运维》这本书在加上博主本人对于redis的理解构成   一、集群伸缩原理           Redis集群提供了灵活的节点扩容和收缩方案。在不影响集群对外服务的情况下，可以为集群添加节点进行扩容也可以下线部分节点进行缩容： 我们都指导，这样的每一个节点上面都分配了我们的16384槽中的几个，以及对应槽下面的数据。所以我们在伸缩节点的时候，实...
Redis5.0+ Redis集群水平扩容|节点删除
craftsman2020的博客
05-26 3294
三个master节点和三个slave节点，8004端口的实例节点存储0-5460这些hash槽，8006端口的实 例节点存储5461-10922这些hash槽，8005端口的实例节点存储10923-16383这些hash槽，这三个master节点存储的所有hash槽组成 redis集群的存储槽位，slave点是每个主节点的备份从节点，不显示存储槽位。新增的节点也没有子节点。
php成功操作redis cluster集群的实例教程
10-17
在Redis Cluster集群中，可以通过客户端命令行工具访问并验证数据是否分布在不同的slot和节点上。当尝试获取一个键时，如果该键不在当前连接的节点上，则Redis会提供重定向信息，告知客户端应该连接哪个节点以获取...
Redis Cluster集群
小yu别错过的博客
11-08 375
为何要搭建Redis集群。Redis是在内存中保存数据的，而我们的电脑一般内存都不大，这也就意味着Redis不适合存储大数据，Redis更适合处理高并发，一台设备的存储能力是很有限的，但是多台设备协同合作，就可以让内存增大很多倍，这就需要用到集群。
redis-cluster 集群增加节点
yiyijianxian的博客
07-22 2061
1.插槽（slot） 1.1 插槽的分配： 整个Redis提供了16384个插槽，也就是说集群中的每个节点分得的插槽数总和为16384。 ./redis-trib.rb 脚本实现了是将16384个插槽平均分配给了N个节点。 1.2 数据如何保存到集群中 set abc 12345命令时，redis是如何将数据保存到集群中的执行步骤如下： （1）接收命令setabc 12345 （2...
Redis Cluster集群从节点挂掉后解决方案
冰巡的博客
06-12 5208
基础信息 Unbutu 20.04 docker版本: 20.10.12 公网ip：172.121.123.221 redis密码：123456 redis集群搭建后端口：7361-7366 情况描述 7361节点 作为7365主节点， 挂掉了，连接异常 CLUSTER NODES 显示 66a2c25d60cc09668556d31c6c60d2295cd23f01 172.121.123.221:7365@17365 master - 0 1650980674000 24 connected 0-5
Redis集群cluster：增加删除（伸缩）节点操作步骤
qq_17732903的博客
06-28 4258
Redis集群cluster：增加删除（伸缩）节点操作步骤。 因为是自己练习的，所有没有弄多台服务器来练习。
redis-cluster添加删除节点步骤
weixin_44996489的博客
04-22 469
1、现有redis-cluster集群 三主三从 [root@localhost conf]# redis-trib.rb add-node 192.168.189.10:7000 192.168.189.10:6999 >>> Adding node 192.168.189.10:7000 to cluster 192.168.189.10:6999 >>> Performing Cluster Check (using node 192.168.189.10:6999
Redis集群增删节点
chenyuangege的专栏
05-27 432
Redis集群增删节点
redis cluster 动态删除节点
自由の力
09-11 633
#首先查询一下 当前所有节点的信息redis-cli -c -p 70011.1.1.2:7007> cluster nodes70c02ebfe21fd9de0fe47b0fce4887657babbe21 1.1.1.2:7005 slave 9ce1d76fe3fac744466088050e227859d88875cd 0 1473585002533 2 connected ca0d013
redis cluster动态删减节点
wst878882582的博客
04-17 537
前言： 在生产环境中扩充资源新增节点是很常见的，但是有些时候资源存在浪费，这个时候也会存在回收节点；下面我就叙述一下redis-cluster删减节点的操作方法。 一：删除主节点(master):查看当前集群信息： 图中可以看到我现在是8个节点4个master,4个slave.首先把该master节点下的哈希槽转移到其他节点下 命令：redis-trib.rb reshard
redis cluster 动态加入节点
自由の力
09-11 3508
承接上次的cluster实验，这次我想加入7007 master和7008 slave两个节点./redis-trib.rb add-node 1.1.1.2:7007 1.1.1.2:7001/usr/local/redis3.0/src/redis-trib.rb reshard 1.1.1.2:7001
Redis集群动态增加或者删除节点
.
03-06 595
redis集群动态增加或者删除节点 前言 首先新增需要添加的节点，这里添加7007 和 7008 修改一些配置文件信息，参考集群配置。 然后启动相应的节点 添加节点到集群 redis-trib.rb add-node 127.0.0.1:7007 127.0.0.1:7001 查看新增节点 redis-cli -c -p 7001 cluster nodes 增加了新的节点之后，这个新的节点...
redis集群新增节点和删除节点
hekliu的博客
09-12 1071
redis集群添加节点 1、主节点：如果添加的是主节点，那么我们需要创建一个空节点，然后将某些哈希槽移动到这个空节点里面。 2、从节点：如果添加的是从节点，我们也需要创建一个空节点，然后把这个新节点设置成集群中某个主节点的复制品。 添加节点： 1、首先把需要添加的节点启动 创建7006目录，拷贝7000中的redis.conf到7006中，然后修改端口port为7006，修改好后进入70...
redis集群拓扑结构自动更新:使用Lettuce连接Cluster集群实例时异常处理
我的博客
04-22 3435
错误：依赖检测失败： liberation-fonts 被 google-chrome-stable-72.0.3626.109-1.x86_64 需要。
手把手教你部署RedisCluster集群
Redis集群的部署涉及多个步骤，包括准备环境、安装...通过以上步骤和知识点，你可以成功部署一个基本的RedisCluster，实现数据的分布式存储和高可用服务。不过，实际部署时还需考虑监控、安全、性能优化等更多方面。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值