redis--节点新增，切换，数据迁移

最新推荐文章于 2024-06-28 11:15:36 发布
最新推荐文章于 2024-06-28 11:15:36 发布
阅读量3.4k 收藏
点赞数
分类专栏： redis 文章标签： redis redis 节点扩容
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wuxu_nanjing/article/details/77966398
版权

新增redis节点， redis版本为redis-3.0.7   ruby-2.2.2



添加主节点到集群命令： 

[xxxxxx src]# ./redis-trib.rb  add-node 192.168.76.116:6380 192.168.76.116:6379
>>> Adding node 192.168.76.116:6380 to cluster 192.168.76.116:6379
>>> Performing Cluster Check (using node 192.168.76.116:6379)
M: 0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379
   slots: (0 slots) master
   0 additional replica(s)
M: ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382
   slots:0-16383 (16384 slots) master
   0 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 192.168.76.116:6380 to make it join the cluster.
[OK] New node added correctly.
You have new mail in /var/spool/mail/root

命令解析： /redis-trib.rb  add-node 192.168.76.116:6380 192.168.76.116:6379  其中192.168.76.116:6380  需要添加的主节点， 为集群中已有的节点


添加从节点到集群： 


[xxxxxx src]# ./redis-trib.rb add-node --slave --master-id ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6381 192.168.76.116:6382 
>>> Adding node 192.168.76.116:6381 to cluster 192.168.76.116:6382
>>> Performing Cluster Check (using node 192.168.76.116:6382)
M: ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382
   slots:0-16383 (16384 slots) master
   1 additional replica(s)
S: c6a480d33b94eb5396ec0d936542490171d49666 192.168.76.116:6383
   slots: (0 slots) slave
   replicates ac0bed66e38ecb64e1fcf35363e773aab0a921ab
S: 0fcf9d2d4f331a33dd319e8ee40d25595c38325a 192.168.76.116:6380
   slots: (0 slots) slave
   replicates 0936588a1ea864fc020e40be4f22b557cf289471
M: 0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379
   slots: (0 slots) master
   1 additional replica(s)
M: 4c075686000e3050b38429cf95717253b2623dc9 192.168.76.116:6384
   slots: (0 slots) master
   0 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 192.168.76.116:6381 to make it join the cluster.
Waiting for the cluster to join.
>>> Configure node as replica of 192.168.76.116:6382.
[OK] New node added correctly.
You have new mail in /var/spool/mail/root
[root@ndl-dg05 src]# 
[root@ndl-dg05 src]# 

命令解析： /redis-trib.rb add-node --slave --master-id ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6381 192.168.76.116:6382 

其中 add-node --slave 表示添加的为从节点。  --master-id ac0bed66e38ecb64e1fcf35363e773aab0a921ab 指定主节点。  192.168.76.116:6381需要添加的从节点。

192.168.76.116:6382  集群中存在的任意节点


改变从节点的master 

[xxxxxx bin]# 
[root@ndl-dg05 bin]# ./redis-cli  -c -p 6381
127.0.0.1:6381> cluster nodes
0fcf9d2d4f331a33dd319e8ee40d25595c38325a 192.168.76.116:6380 slave 0936588a1ea864fc020e40be4f22b557cf289471 0 1505381033845 1 connected
c6a480d33b94eb5396ec0d936542490171d49666 192.168.76.116:6383 slave ac0bed66e38ecb64e1fcf35363e773aab0a921ab 0 1505381028844 4 connected
95e9f52c3c0f3aad3b58191ffedb8ea6adf1db61 192.168.76.116:6381 myself,slave ac0bed66e38ecb64e1fcf35363e773aab0a921ab 0 0 0 connected
0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379 master - 0 1505381030844 1 connected
ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382 master - 0 1505381032846 4 connected 0-16383
4c075686000e3050b38429cf95717253b2623dc9 192.168.76.116:6384 master - 0 1505381031844 0 connected
127.0.0.1:6381> 
127.0.0.1:6381> cluster replicate 4c075686000e3050b38429cf95717253b2623dc9
OK
127.0.0.1:6381> quit
You have new mail in /var/spool/mail/root
[root@ndl-dg05 bin]# ./redis-cli  -c -p 6381
127.0.0.1:6381> cluster nodes
0fcf9d2d4f331a33dd319e8ee40d25595c38325a 192.168.76.116:6380 slave 0936588a1ea864fc020e40be4f22b557cf289471 0 1505381096899 1 connected
c6a480d33b94eb5396ec0d936542490171d49666 192.168.76.116:6383 slave ac0bed66e38ecb64e1fcf35363e773aab0a921ab 0 1505381094899 4 connected
95e9f52c3c0f3aad3b58191ffedb8ea6adf1db61 192.168.76.116:6381 myself,slave 4c075686000e3050b38429cf95717253b2623dc9 0 0 0 connected
0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379 master - 0 1505381095899 1 connected
ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382 master - 0 1505381091899 4 connected 0-16383
4c075686000e3050b38429cf95717253b2623dc9 192.168.76.116:6384 master - 0 1505381093899 0 connected
127.0.0.1:6381> 

如上面展示

95e9f52c3c0f3aad3b58191ffedb8ea6adf1db61 192.168.76.116:6381 myself,slave ac0bed66e38ecb64e1fcf35363e773aab0a921ab 0 0 0 connected 切换之前是

192.168.76.116:6382 的从，切换之后是192.168.76.116:6384  的从。 

命令解析： 127.0.0.1:6381> cluster replicate 4c075686000e3050b38429cf95717253b2623dc9

其中 4c075686000e3050b38429cf95717253b2623dc9 为需要的主节点node id 


数据迁移，将192.168.76.116:6382 节点slot迁移10个槽位到192.168.76.116:6379

[xxxxxx src]# ./redis-trib.rb reshard 192.168.76.116:6379     ----最开始执行的命令 
>>> Performing Cluster Check (using node 192.168.76.116:6379)
M: 0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379
   slots: (0 slots) master
   1 additional replica(s)
M: ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382
   slots:0-16383 (16384 slots) master
   1 additional replica(s)
S: c6a480d33b94eb5396ec0d936542490171d49666 192.168.76.116:6383
   slots: (0 slots) slave
   replicates ac0bed66e38ecb64e1fcf35363e773aab0a921ab
S: 0fcf9d2d4f331a33dd319e8ee40d25595c38325a 192.168.76.116:6380
   slots: (0 slots) slave
   replicates 0936588a1ea864fc020e40be4f22b557cf289471
S: 95e9f52c3c0f3aad3b58191ffedb8ea6adf1db61 192.168.76.116:6381
   slots: (0 slots) slave
   replicates 4c075686000e3050b38429cf95717253b2623dc9
M: 4c075686000e3050b38429cf95717253b2623dc9 192.168.76.116:6384
   slots: (0 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
How many slots do you want to move (from 1 to 16384)? 10                        ---这个地方填写需要迁移的槽位数
What is the receiving node ID? 0936588a1ea864fc020e40be4f22b557cf289471    ----这个地方填写接受槽位的nodeid 
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:ac0bed66e38ecb64e1fcf35363e773aab0a921ab                    ---这个地方填写需要分出槽位的nodeid 
Source node #2:done                                                 ---这个地方选择done 代表着只从填写的Source node 获取slot 
Ready to move 10 slots.
  Source nodes:
    M: ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382
   slots:0-16383 (16384 slots) master
   1 additional replica(s)
  Destination node:
    M: 0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379
   slots: (0 slots) master
   1 additional replica(s)
  Resharding plan:
    Moving slot 0 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 1 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 2 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 3 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 4 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 5 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 6 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 7 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 8 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
    Moving slot 9 from ac0bed66e38ecb64e1fcf35363e773aab0a921ab
Do you want to proceed with the proposed reshard plan (yes/no)? yes    --输入yes 表示同意
Moving slot 0 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 1 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 2 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 3 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 4 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 5 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 6 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 7 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 8 from 192.168.76.116:6382 to 192.168.76.116:6379: 
Moving slot 9 from 192.168.76.116:6382 to 192.168.76.116:6379: 
You have new mail in /var/spool/mail/root
[root@ndl-dg05 src]#  


迁移后检测：

127.0.0.1:6381> cluster nodes 
0fcf9d2d4f331a33dd319e8ee40d25595c38325a 192.168.76.116:6380 slave 0936588a1ea864fc020e40be4f22b557cf289471 0 1505382099974 7 connected
c6a480d33b94eb5396ec0d936542490171d49666 192.168.76.116:6383 slave ac0bed66e38ecb64e1fcf35363e773aab0a921ab 0 1505382096973 4 connected
95e9f52c3c0f3aad3b58191ffedb8ea6adf1db61 192.168.76.116:6381 myself,slave 4c075686000e3050b38429cf95717253b2623dc9 0 0 0 connected
0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379 master - 0 1505382100976 7 connected 0-9
ac0bed66e38ecb64e1fcf35363e773aab0a921ab 192.168.76.116:6382 master - 0 1505382097973 4 connected 10-16383
4c075686000e3050b38429cf95717253b2623dc9 192.168.76.116:6384 master - 0 1505382098974 0 connected
127.0.0.1:6381> 

 其中0936588a1ea864fc020e40be4f22b557cf289471 192.168.76.116:6379 master - 0 1505382100976 7 connected 0-9 表示迁移成功




wuxu_nanjing
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis入门（二）--- redis新增数据类型，jedis操作redis，springboot整合redis
化身强盗的博客
12-11 1435
文章目录4、Redis新增的数据类型4.1 Bitmaps4.1.1 基本命令4.1.2 实例4.1.3 Bitmaps和set的对比4.2 HyperLogLog4.2.1 基本命令4.2.2 实例4.3 Geospatial4.3.1 基本命令4.3.2 实例5、Jedis操作redis5.1 Jedis-String5.2 Jedis-List5.3 Jedis-Set5.4 Jedis-Hash5.5 Jedis-Zset6、Springboot整合Redis1、pom依赖2、配置config3、测
redis-shake 3.0.0最新版
09-08
1. **全量迁移**：Redis-Shake可以执行从源Redis实例到目标Redis实例的全量数据迁移，确保数据的一致性。 2. **增量迁移**：在全量迁移基础上，Redis-Shake还能进行实时的增量同步，确保新产生的数据也能及时迁移。...
redis 集群-新增加节点并数据迁移
wuxu_nanjing的博客
08-17 5145
现在我们已经有一个包含6个节点的集群，我写了段代码，往集群写入10W条测试数据。 现在模拟机器扩容场景，为集群加入一个master节点7006和一个slave节点7007。 redis-trib.rb add-node 10.211.55.4:7006 10.211.55.4:7000 以上命令将7006节点接入7000所在的集群。接下来，我们为7006增加一个slave节点。 redis
Redis数据迁移-RedisShake
最新发布
青春年少不知疼的博客
06-28 648
redis-shake是阿里云Redis团队开源的用于Redis数据迁移和数据过滤的工具。一、基本功能redis-shake它支持解析、恢复、备份、同步四个功能恢复restore：将RDB文件恢复到目的redis数据库。备份dump：将源redis的全量数据通过RDB文件备份起来。解析decode：对RDB文件进行读取，并以json格式解析存储。同步sync：支持源redis和目的redis的数据同步，支持全量和增量数据的迁移，支持单节点、主从版、集群版之间的互相同步。
向redis添加数据
zhaojikun521521的博客
12-08 3775
from flask import Flask,send_file,send_from_directory import time import datetime import redis import random from flask import request import io import os from flask import Response app = Flask(__name__) r = redis.Redis() task_dick = {} @app.route('/c
redis节点切换命令
黎明^o^
12-03 2129
让这个节点变成主节点：./redis-cli -h 10.10.210.127 -p 6379 -a Occ2018 slaveof no one 让这个节点变成主节点的从节点：redis-cli -h 127.0.0.1 -p 6379 -a Occ2018 slaveof 主IP 6379
redis-5.0.7集群节点数据迁移
QwQNightmare的博客
03-22 868
redis 5.0.7集群节点数据迁移 一、创建集群 1.首先准备6台虚拟机，安装好redis-5.0.7并创建集群。 redis-cli --cluster create 192.168.80.100:6379 192.168.80.101:6379 192.168.80.102:6379 192.168.80.103:6379 192.168.80.104:6379 192.168.80.10...
tomcat-redis-session-manager
06-06
此外，为了确保高可用性，可以考虑在Redis集群上运行`tomcat-redis-session-manager`，这样即使某个Redis节点故障，session数据也不会丢失，服务仍能正常运行。 总的来说，`tomcat-redis-session-manager`是应对...
redis-windows-7.2.4.zip
01-14
- 解压"redis-windows-7.2.4.zip"，找到`redis-server.exe`启动文件。 - 运行`redis-server.exe`，默认情况下，Redis监听6379端口。 - 可以通过配置文件`redis.windows.conf`修改默认设置，如端口、内存限制、...
redis-windows-7.2.5.zip
05-20
在Windows环境下安装Redis，可以借助于提供的压缩包"redis-windows-7.2.5.zip"进行。以下是关于Redis及其在Windows上的安装和使用的详细知识： 1. **Redis特性** - **键值对存储**：Redis的核心是键值对模型，其中...
Redis-x64-5.0.14.msi和Redis-x64-5.0.14.zip
12-20
解压后，你可以找到包括`redis-server.exe`、`redis-cli.exe`等在内的可执行文件，以及配置文件`redis.conf`。这种方式适合于需要自定义配置或手动管理服务的用户。通过编辑`redis.conf`，你可以调整Redis的各项参数...
Redis新增数据类型Bitmaps
f_yuqing的博客
07-18 195
引言 现代计算机语用二进制（位）作为信息的基础单位，1个字节等于8位。 例如：“abc”字符串是由三个字节组成，但实际我们的计算机在存储时使用二进制表示的。“abc”分别对应者ASCII码分别是97,98,99，对应的二进制分别为01100001、 01100010和01100011，如下图： 使用 现代计算机语用二进制（位）作为信息的基础单位，1个字节等于8位。合理的使用操作位能够有效的提高内存使用率和开发效率 Bitmaps这种数据类型就是Redis为我们提供的可以实现位操作的数据类型 Bitm
redis集群是怎么一回事，以及如何去做集群中数据的迁移
ITMANLZY的技术空间
02-27 959
福利：这是我的个人IT资源网站，所有资源都免费，注册登录后就可以看到密码，需要什么大家尽情选取！ 今天来说一说redis集群，redis集群主要解决的就是单体存储的限制，通过集群的方式扩大redis的存储，比如我有三台物理机，那么我可以在每一台部署一个redis服务，将三台redis服务连接成一个集群，那么集群整体的存储就扩大了三倍，下边说一些关于redis集群的知识和一些注意的点 首先搭建redis集群，需要将redis的配置文件中的cluster-mode打开，以集群模式运行，每个节点要注意开放端口
二、Redis数据添加的过程
m0_66918897的博客
06-24 966
通过大量的注释，详解Redis添加一个数据的过程和细节，帮助快速了解Redis的运行原理。
redis集群安装配置数据迁移和客户端（java方向）第二节，数据迁移
cs_chang的博客
10-28 836
安装部署完成，下一节介绍，添加节点，删除节点，数据迁移，客户端（Java方向，主要是讲spring，jedis和cluster下的批量提交等）
redis集群手动迁移槽
zwj1030711290的CSDN
05-27 1193
网上的知识太杂，还是写一遍自己亲身操作的吧 因为集群某个节点经常宕机，目前原因未知。所以掉线的节点再加入集群后，经常发现哈希槽分配错乱，甚至间隔，如下，741槽本应在连续不断的8002节点上，现在却跑到8001节点，手动调整吧 目标是把741槽从8001节点转移到8002节点。 第一步两种操作方式任选其一： 在要迁入的节点上（8002）操作： cluster setslot 741 importing af40bb4ce7a4d623a812b716246c30df49b9db08(741目前
redis迁移数据之槽道讨论
laughing1997的博客
10-23 2772
针对redis3.0之前的版本。在哨兵集群管理的主从结构的集群，结构如下 哨兵主从集群和三个单独redis节点的集群同时存在。 迁移数据; hash一致性,扩容时,迁移数据大量减少; 但是这种迁移是运维工程师做不了的,需要了解key值计算过程 当前结构的redis节点的利用率太低 真正接收数据做数据处理的节点,9个节点中,接收key值存储的只有3个 redis3.0版本之后，集群的结构如下： ...
Redis常用及新增数据类型
qq_61465103的博客
10-22 1290
Redis常用及新增数据类型
redis cluster的数据迁移
z69183787的专栏
12-06 1004
整体流程 redis官方文档中提供的数据迁移办法是借助redis-trib脚本，其实严格来说，这个redis-trib并不是redis本体的一部分，它只是官方按照redis设计规范实现的一套脚本集合，帮助用户更方便的使用redis-cluster。 实际上，我们完全可以脱离这个脚本来使用cluster, 或者用其他方式实现这套逻辑，比如搜狐tv的redis运维工具cachecloud里，就用ja...
redis-cluster数据自动迁移
07-14
Redis Cluster 是 Redis 的分布式解决方案，它可以将数据分散存储在多个节点上，提供高可用性和扩展性。当需要进行数据迁移时，Redis Cluster 提供了自动的数据重新分片机制。 在 Redis Cluster 中，数据被划分为多个槽（slot），每个槽对应一个节点。当需要迁移数据时，可以通过以下步骤实现自动迁移： 1. 增加新节点：首先，在集群中添加一个新的节点。这个节点将用于接收即将迁移的数据。 2. 数据迁移操作：执行数据迁移操作，将指定的槽从源节点移动到目标节点。可以使用 Redis 的 `CLUSTER SETSLOT` 命令来手动迁移槽，或者使用工具如 `redis-trib.rb` 来自动迁移。 3. 数据迁移完成：等待数据迁移操作完成。可以使用 `CLUSTER NODES` 命令来查看集群节点的状态，确保数据已经成功迁移。 4. 删除源节点：当数据迁移完成后，可以从集群中删除源节点。这样，集群将调整槽的分布，确保每个槽都有正常的主节点。 需要注意的是，在数据迁移期间，Redis Cluster 会自动进行数据同步和复制，以保证数据的一致性和可用性。同时，可以通过配置 Redis Cluster 的参数来控制数据迁移的速度和并发度。 总结起来，Redis Cluster 提供了自动的数据重新分片机制，可以通过添加新节点、执行数据迁移操作和删除源节点来实现数据的自动迁移。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值