Redis3自带的ruby脚本和cluster命令的使用

最新推荐文章于 2022-08-13 00:34:57 发布
最新推荐文章于 2022-08-13 00:34:57 发布
阅读量1.3k 收藏 1
点赞数
分类专栏： redis 缓存 文章标签： redis 集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chanrenyuan/article/details/51855169
版权

Resharding the cluster

所谓的对集群数据进行分片，就是把实例节点的一些hash桶转移到其他实例节点。我们使用ruby脚本进行分片：

./redis-trib.rb reshard 127.0.0.1:7000

我们需要提供一个节点的ip跟端口用于定位redis集群，redis-trib.rb将会自动寻找集群中的其他节点，键入命令后，会提示我们要转移多少数据

How many slots do you want to move (from 1 to 16384)?

找出redis节点的实例ID的命令：

$ redis-cli -p 7000 -h 127.0.0.1cluster nodes | grep myself

将会输出

97a3a64667477371c4479320d683e4c8db5858b1 :0 myself,master - 0 0 0 connected 0-5460

你将会被询问你需要将数据复制到那些节点上去，我们输入ALL
在结束分片之后，我们可以使用下面命令检测集群的情况：

./redis-trib.rb check 127.0.0.1:7000

Scripting a resharding operation

集群的重新分片无需在交互窗口中进行，我们可以使用下面的命令进行操作

./redis-trib.rb reshard –from 《node-id》 –to 《node-id》 –slots 《number of slots》 –yes 《host》:《port》

当前redi-trrb还没有任何方法对key的转移自动再平衡。

Adding a new node

增加实例服务器，就是增加一个主节点或者是从节点，并往其中迁入数据。
启动一个新的redis实例数据库，并使用redis-trib脚本将其加入集群，使用add-node命令，第一个参数是即将要加入的节点名字，第二个参数是集群中任意一个的redis实例的ip跟端口。

./redis-trib.rb add-node 127.0.0.1:7006 127.0.0.1:7000

redis 127.0.0.1:7006> cluster nodes
3e3a6cb0d9a9a87168e266b0a0b24026c0aae3f0 127.0.0.1:7001 master - 0 1385543178575 0 connected 5960-10921
3fc783611028b1707fd65345e763befb36454d73 127.0.0.1:7004 slave 3e3a6cb0d9a9a87168e266b0a0b24026c0aae3f0 0 1385543179583 0 connected
f093c80dde814da99c5cf72a7dd01590792b783b :0 myself,master - 0 0 0 connected
2938205e12de373867bf38f1ca29d31d0ddb3e46 127.0.0.1:7002 slave 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e 0 1385543178072 3 connected
a211e242fc6b22a9427fed61285e85892fa04e08 127.0.0.1:7003 slave 97a3a64667477371c4479320d683e4c8db5858b1 0 1385543178575 0 connected
97a3a64667477371c4479320d683e4c8db5858b1 127.0.0.1:7000 master - 0 1385543179080 0 connected 0-5959 10922-11422
3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e 127.0.0.1:7005 master - 0 1385543177568 3 connected 11423-16383

如上，可以知道机器已经加入到集群中了，但是有两点必须知道的是，当前7006端口的redis实例上没有存放数据，也就是说没有存放任何slot（桶），而他不参与主从切换时候的选举

增加一个从服务器

使用redis-trib命令，但是命令没有指定加入节点要成为哪一个主实例的从服务器，所以redis-trib会随机选择一个主实例：

./redis-trib.rb add-node –slave 127.0.0.1:7006 127.0.0.1:7000

如果要指定哪一个实例数据库，需要指定master-id，使用如下命令：

./redis-trib.rb add-node –slave –master-id 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e 127.0.0.1:7006 127.0.0.1:7000
一种更加普遍的方法是先往集群加入一个master节点，成功加入后再使用cluster replicate方法将其作为一个某个主实例的从节点。
redis 127.0.0.1:7006> cluster replicate 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e

检测一个主实例下的从服务器

$ redis-cli -p 7000 cluster nodes | grep slave | grep 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e
f093c80dde814da99c5cf72a7dd01590792b783b 127.0.0.1:7006 slave 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e 0 1385543617702 3 connected
2938205e12de373867bf38f1ca29d31d0ddb3e46 127.0.0.1:7002 slave 3c3a0c74aae0b56170ccb03a76b60cfe7dc1912e 0 1385543617198 3 connected

Remove Node

使用redis-trib，第一个参数是集群中任意一个服务器的ip跟端口，用于定位集群，第二个参数是你要删除node的nodeId

./redis-trib del-node 127.0.0.1:7000 <node-id>

你在删除一个数据之前必须确认该数据已经清空了，否则你要先把数据分片到其他redis实例上去

Redis cluster的命令

  • CLUSTER INFO 打印集群的信息
  • CLUSTER NODES 列出集群当前已知的所有节点（node），以及这些节点的相关信息
  • CLUSTER MEET 《ip》 《port》 将 ip 和 port 所指定的节点添加到集群当中，让它成为集群的一份子
  • CLUSTER FORGET 《node_id》 从集群中移除 node_id 指定的节点。
  • CLUSTER REPLICATE 《node_id》 将当前节点设置为 node_id 指定的节点的从节点。
  • CLUSTER SAVECONFIG 将节点的配置文件保存到硬盘里面。
  • CLUSTER ADDSLOTS 《slot》 [slot …] 将一个或多个槽（slot）指派（assign）给当前节点。
  • CLUSTER DELSLOTS 《slot》 [slot …] 移除一个或多个槽对当前节点的指派。
  • CLUSTER FLUSHSLOTS 移除指派给当前节点的所有槽，让当前节点变成一个没有指派任何槽的节点。
  • CLUSTER SETSLOT 《slot》 NODE 《node_id》将槽 slot 指派给 node_id 指定的节点，如果槽已经指派给另一个节点，那么先让另一个节点删除该槽>，然后再进行指派。
  • CLUSTER SETSLOT 《slot》 MIGRATING 《node_id>》将本节点的槽 slot 迁移到 node_id 指定的节点中。
  • CLUSTER SETSLOT 《slot》 IMPORTING 《node_id》从 node_id 指定的节点中导入槽 slot 到本节点。
  • CLUSTER SETSLOT 《slot》 STABLE 取消对槽 slot 的导入（import）或者迁移（migrate）。
  • CLUSTER KEYSLOT 《key》计算键 key 应该被放置在哪个槽上。
  • CLUSTER COUNTKEYSINSLOT 《slot》 返回槽 slot 目前包含的键值对数量。
  • CLUSTER GETKEYSINSLOT 返回 count 个 slot 槽中的键。

这些命令是集群所独有的。执行上述命令要先登录

遇到的问题

redis集群中的16384个桶如果没有被全部覆盖的话是不能接收客户端任务的，redis3中的16384个桶只能由redis的主实例节点所持有，从实例节点使用在命令行端使用read only命令后可以接收读命令，否则不执行读命令，读写命令都由主实例节点进行，加入redis集群的主实例节点必须分配桶，如果没有分配桶的话，新加入的主实例节点不工作，所以必须使用脚本或者redis3自带的命令进行桶的重新分配。

Redis3的redis-trib.rb脚本使用

Redis-trib.rb命令说明

命令参数说明demo
create–replicas[number]host1:port…hostN:portNCreate命令直接自动生成redis配置，包括redis机器间的meet操作，以及16384桶的分配。number 指定从实例节点个数，repicas参数必须带上host:port等等为redis集群所有实例./redis-trib.rb create –replicas 0 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002
checkhost:port该集群任意一个机器的端口跟ip./redis-trib.rb check 127.0.0.1:7000
infohost:port该集群任意个机器的端口跟ip/redis-trib.rb info 127.0.0.1:7000
fixhost:port –timeout该集群任意个机器的端口跟ip./redis-trib.rb fix 127.0.0.1:7000或者./redis-trib.rb fix –timeout 15 127.0.0.1:7000
reshardhost:port –from –to –slots –yes –timeout –pipeline该命令用于对集群中的桶进行重新分片，该命令存在提示，需要分片那个机器的桶，分配到那个实例去，该命令用于机器调整。./redis-trib.rb reshard 127.0.0.1:7000
rebalancehost:port –weight –auto-weights –use-empty-masters –timeout –simulate –pipeline –threshold对集群中每个实例的桶进行调整./redis-trib.rb rebalance 127.0.0.1:7000
add-nodenewhost:newport existhost:existport slave master-idnewhost:newport 新加入的ip跟端口，集群任意一个端口跟ip；/redis-trib.rb add-node 127.0.0.1:7003 127.0.0.1:7000或者./redis-trib.rb add-node –slave –master-id dc49104012c89154d47cbdcf9bb2fa54906fb1ae 127.0.0.1:7003 127.0.0.1:7000
del-nodehost:port node_id集群中任意一个端口要移除的节点node_id如果要移除的节点的node_id的分配有slots时候，无法成功。需要移除slots后才能成功移除，并且删除节点后会停止该实例./redis-trib.rb del-node 127.0.0.1:7000 646d18e2cbc1219d2ac457ec09e3c574ada98dd7
set-timeouthost:port time(ms)/redis-trib.rb set-timeout 127.0.0.1:7000 1500
call./redis-trib.rb call host:port command./redis-trib.rb call 127.0.0.1:7001 dbsize
import–from importHost:importPort host:port前一个是存放数据的节点，后一个是接收数据的节点，存放数据的节点不能是集群节点./redis-trib.rb import –from 127.0.0.1:7001 127.0.0.1:7000

Redis-trib.rb命令及输出

命令输出
./redis-trib.rb create –replicas 0 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002用于构建redis集群
./redis-trib.rb check 127.0.0.1:7000检查redis集群是否正常
./redis-trib.rb reshard 127.0.0.1:7000重新分配slot，可手工选择
./redis-trib.rb rebalance 127.0.0.1:7000自动重新平衡key的分布
./redis-trib.rb add-node 127.0.0.1:7003 127.0.0.1:7000增加节点，前者已有集群任意的实例ip跟端口，后者为即将加入的新实例
./redis-trib.rb add-node –slave –master-id dc49104012c89154d47cbdcf9bb2fa54906fb1ae 127.0.0.1:7003 127.0.0.1:7000用于增加redis实例

Redis命令行的cluster命令

命令参数输出
cluster addslots slot1,slot2…slotN为当前登陆的服务器分配桶,1-16384
cluster delslots slot1,slot2..slotNcluster delslots slot1,slot2..slotN
CLUSTER SETSLOT slot MIGRATING node-id将给定节点 node 中的槽 slot 迁移出节点
CLUSTER SETSLOT slot IMPORTING node用于将给定槽 slot 导入到节点 node
CLUSTER SETSLOT slot STABLE node-id用于取消迁移的状态
CLUSTER SETSLOT slot NODE node-id用于完成迁移，迁入迁出都需要使用才能完成
cluster count-failure-report node_id
cluster count keysinslot slot当前服务器的slot的数量
cluster failover[force|takeover]该命令只能用于从服务器，使从服务器宕机
cluster forget node_idRemove节点
cluster info
cluster nodes展示节点信息
cluster replicate node_id把当前作为node_id的从节点，把主节点必须为empty且没有分配slots
cluster reset [hard|soft]
cluster reset [hard|soft]强制要求cluster保存集群信息
cluster slots展示集群中桶的分配信息
cluster keyslot key该key的crc16值%16383
SCAU啊源
关注
专栏目录
redis 的ruby 脚本
weixin_43542114的博客
03-09 354
#!/usr/bin/env ruby # TODO (temporary here, we'll move this into the Github issues once # redis-trib initial implementation is completed). # # - Make sure that if the rehashing fails in the middle redis-trib will try # to recover. # - When redis-t
安装Redis集群所需要的Ruby脚本
程序员小强的博客
03-23 6754
Ruby 一种简单快捷的面向对象（面向对象程序设计）脚本语言，Redis 5 需要之前使用Ruby辅助创建集群。 1.前置工作 检查是否已经存在，如果已经存在则需要先删除1.1卸载当前ruby #查看版本 ruby -v #如果已经存在则需要卸载 yum remove ruby 2.安装ruby 2.1下载ruby稳定版 cd /usr/local/src wget https://ca...
redis集群的ruby 命令
weixin_30634661的博客
12-28 111
redis 集群 ./bin/redis-cli --cluster create 192.168.120.111:7001 192.168.120.111:7002 192.168.120.111:7003 192.168.120.111:7004 192.168.120.111:7005 192.168.120.111:7006 --cluster-replicas 1 待更新 转...
使用ruby搭建redis集群
qq_40794266的博客
01-28 7302
环境准备  1.使用ruby脚本搭建集群。需要ruby的运行环境   所以我们需要安装ruby: linux执行命令   yum -y install ruby   yum-y install rub 2. 下载 redis 以及 redis.xxx.gem 其作用就是编译ruby的文件,  安装redis请参考 点击打开链接 从官网https://ruby
redis，ruby安装
weixin_42675198的博客
07-12 1374
Centos7 redis集群布置（至少6个节点）解压安装redistar -zxvf /压缩包目录 -C /解压目录进入解压目录Make编译创建集群所需目录7000-7005将redis.conf复制到各个目录更改文件Bind ip（可改为本机ip）port 7000（端口号不同）daemonize yescluster-enabled yescluster-config-file nodes....
使用Ruby脚本部署Redis Cluster集群步骤讲解
09-09
总结，使用Ruby脚本部署Redis Cluster简化了集群的创建过程，只需几个简单的命令即可完成。这种方式适合在开发和测试环境中快速搭建Redis Cluster，但在生产环境中，可能需要考虑更复杂的部署策略和自动化工具，如...
redis集群，使用ruby脚本搭建集群
09-25
Redis 是一个高性能的键值数据库，它以其丰富的数据结构、高效的数据操作以及广泛的应用场景而闻名。...通过以上步骤，你可以成功地使用 Ruby 脚本搭建 Redis 3.0.0 集群，并享受到它带来的性能和扩展性优势。
Ruby RedisCluster
04-04
在Ruby中与RedisCluster交互，我们需要使用特定的客户端库，如`redis-namespace`和`redis-cluster`。这些库封装了复杂的集群通信和故障处理逻辑，使得开发者可以更专注于业务逻辑。 首先，安装必要的库。在Gemfile...
ruby和redis接口.rar
08-28
在压缩包内的"ruby和redis接口"可能包含了实现这一功能的具体代码，比如使用`redis`库连接Redis节点，执行`CLUSTER MEET`命令来建立节点间的连接，`CLUSTER ADDSLOTS`来分配槽位，以及`CLUSTER REPLICATE`命令来设置...
redis3.2集群搭建cluster模式，ruby
小小的幸福
09-17 767
集群结构： 6个节点，一主一备，三个主节点，三个从节点   1.单个redis的配置 1.1 创建redis的Dockerfile FROM redis:3.2 MAINTAINER fanzl ENV REDIS_HOME /usr/local RUN mkdir $REDIS_HOME/conf WORKDIR $REDIS_HOME/conf ## 创建一个redis.con...
redis-trib.rb
11-27
redis-trib.rb redis集群脚本，亲测可用。ps: 先安装ruby
【Redis】【Ruby】redis4.0版本单机多实例集群create-cluster脚本创建，及脚本中使用ruby创建集群报错的解决思路和方法
小丛的知识窝
08-13 415
新版本redis的集群创建会更加简单，因为生产环境使用的是4.0版本故需要研究一下4.0的集群创建。
快速配置redis三主三从配置（ruby问题已解决）
weixin_49674445的博客
05-13 313
搭建Redis3.2.11版本集群 ***搭建时候首先要确定版本号 5.0以下和5.0以上操作有不一样得地方 三主三从搭建： 1.确定要安装得版本（此次安装为redis3.2.11） 下载redis wget http://download.redis.io/releases/redis-版本号.tar.gz tar xf redis-3.2.11.tar.gz 配置文件 redis.conf （配置开启集群以及哨兵） bind 127.0.0.1 protected-mod...
Redis之集群redis-trib.rb环境的搭建-yellowcong
10-27 7162
前面已经准备好了搭建集群的redis节点，接下来我们要把这些节点都串连起来搭建集群。官方提供了一个工具：redis-trib.rb 看后缀就知道这鸟东西不能直接执行，它是用ruby写的一个程序，所以我们还得安装ruby.安装完ruby后，需要安装zlib依赖，修改gem源配置。最后执行`gem install redis` 安装redis接口。
企业—redis的集群,添加新节点及集群重新分片
weixin_44224288的博客
05-13 3486
一.redis集群简介 1.集群 集群是一组相互独立的、通过高速网络互相联通的节点，构成了一个组，并以单一系统的模式加以管理。一个客户与集群相互作用时，集群就是一个独立的服务器。 集群技术是一种通用的技术，其目的是为了解决单机运算能力的不足、IO能力的不足、提高服务的可靠性、获得规模可扩展能力，降低整体方案的运维成本（运行、升级、维护成本）。能在大流量访问下提供稳定的业务，集群化是存储的必然形态。...
Windows下搭建Redis集群
m0_67393342的博客
04-27 1834
同一台电脑上部署集群 准备安装所需要的4个组件： Redis、Ruby语言运行环境、Redis的Ruby驱动redis-3.2.2.gem、创建Redis集群的工具redis-trib.rb 安装Redis，并运行6个实例(Redis集群需要至少3个以上节点，低于3个无法创建，3主，3从); 使用redis-trib.rb工具来创建Redis集群，由于该文件是用ruby语言写的，所以需要安装Ruby开发环境，以及驱动redis-3.2.2.gem 1.下载并安装Redis 其GitHub路径如下：[G
redis集群启动脚本
chenxinchongcn的博客
11-29 8280
CentOs7搭建基于Redis-4.0.2的集群环境之图文详解 前言： 我在当前的项目建设过程中，使用到了 Redis 的集群，主要是用来减轻数据库的压力和页面加载速度，说的直接点就是增强用户的体验感，其实 Redis 集群搭建看似简单（我当时也是这么想的），但在实际 Redis 集群搭建的过程中也遇到了一些问题，但通过不懈的努力再加上各种解决问题的手段，最后终于解决
Redis的集群创建步骤(非redis-trib.rb脚本方式)
煉心的博客
11-21 4002
本文目的仅用于测试验证创建集群的相关步骤，所以只是采用最简单的配置在同一个服务器部署了由3个节点组成的Redis集群 1. 创建集群步骤，本文使用Redis 3.2.5版本 1.1 创建配置文件目录，使用的端口分别为5000,5001和5002 [root@xxx ~]# cd /opt/redis-3.2.5 [root@xxx redis-3.2.5]# mkdir 500
redis-Cluster第三篇redis-trib.rb 搭建&原理篇
自有永有的博客
06-01 3153
redis-trib.rb简介 redis-trib.rb 是采用 Ruby 实现的 Redis 集群管理工具。内部通过 Cluster 相关命令帮我们简化集群创建、检查、槽迁移和均衡等常见运维操作，使用之前需要安装 Ruby 依赖环境。 搭建集群 安装 Ruby 依赖环境 wget https://cache.ruby-lang.org/pub/ruby/2.5/ruby-2.5.1.tar.g...
使用ruby脚本部署redis集群
最新发布
05-26
以下是使用 Ruby 脚本部署 Redis 集群的基本步骤： 1. 安装 Redis 和 Ruby 环境。 2. 安装 Ruby 的 Redis gem。可以使用以下命令： ``` gem install redis ``` 3. 创建一个 Ruby 脚本来部署 Redis 集群。以下...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值