Redis集群搭建实验

本文介绍了如何在Redis 3.0.0版本上搭建集群,强调了集群的去中心化特性、节点间的通信和故障检测机制。通过在单台服务器上模拟6个节点来演示集群搭建过程,包括配置、启动Redis实例、创建集群和检查集群状态。集群搭建过程中遇到了`redis-trib.rb`不再可用的问题,推荐使用`redis-cli`命令进行集群创建。最后,展示了如何验证集群的正常运行和数据分布情况。
摘要由CSDN通过智能技术生成

 使用ruby搭建集群报 WARNING: redis-trib.rb is not longer available!错误,使用redis-cli命令 搭建(自己觉得不推荐使用ruby搭建)

​​​​​​​

一、Redis Cluster(Redis集群)简介

  • redis是一个开源的key value存储系统,受到了广大互联网公司的青睐。redis3.0版本之前只支持单例模式,在3.0版本及以后才支持集群,我这里用的是redis3.0.0版本;
  • redis集群采用P2P模式,是完全去中心化的,不存在中心节点或者代理节点;
  • redis集群是没有统一的入口的,客户端(client)连接集群的时候连接集群中的任意节点(node)即可,集群内部的节点是相互通信的(PING-PONG机制),每个节点都是一个redis实例;
  • 为了实现集群的高可用,即判断节点是否健康(能否正常使用),redis-cluster有这么一个投票容错机制:如果集群中超过半数的节点投票认为某个节点挂了,那么这个节点就挂了(fail)。这是判断节点是否挂了的方法;
  • 那么如何判断集群是否挂了呢? -> 如果集群中任意一个节点挂了,而且该节点没有从节点(备份节点),那么这个集群就挂了。这是判断集群是否挂了的方法;
  • 那么为什么任意一个节点挂了(没有从节点)这个集群就挂了呢? -> 因为集群内置了16384个slot(哈希槽),并且把所有的物理节点映射到了这16384[0-16383]个slot上,或者说把这些slot均等的分配给了各个节点。当需要在Redis集群存放一个数据(key-value)时,redis会先对这个key进行crc16算法,然后得到一个结果。再把这个结果对16384进行求余,这个余数会对应[0-16383]其中一个槽,进而决定key-value存储到哪个节点中。所以一旦某个节点挂了,该节点对应的slot就无法使用,那么就会导致集群无法正常工作。
  • 综上所述,每个Redis集群理论上最多可以有16384个节点

二、集群搭建需要的环境 

  • Redis集群至少需要3个节点,因为投票容错机制要求超过半数节点认为某个节点挂了该节点才是挂了,所以2个节点无法构成集群。
  • 要保证集群的高可用,需要每个节点都有从节点,也就是备份节点,所以Redis集群至少需要6台服务器。因为我没有那么多服务器,也启动不了那么多虚拟机,所在这里搭建的是伪分布式集群,即一台服务器虚拟运行6个redis实例,修改端口号为(7001-7006),当然实际生产环境的Redis集群搭建和这里是一样的。
  • 安装ruby

三、集群搭建具体步骤如下(注意要关闭防火墙) 

        3-1.在usr/local目录下新建redis-cluster目录,用于存放集群节点 

 

        3-2.把(建立快捷启动的目录,在安装redis时的目录,make install 将命令拷贝到usr/local/目录,我的在usr/local/bin下)bin目录下所有文件(redis启动文件)复制到/usr/local/redis-cluster/redis01目录下,不用担心这里没有redis01目录,会自动创建的。操作命令如下(执行命令时注意当前所在路径)我的是在根目录下: 

cp -r /usr/local/bin/ /usr/local/redis-cluster/redis01

         3-3. 删除redis01目录下的快照文件dump.rdb,并且修改该目录下的redis.cnf文件,具体修改两处地方:一是端口号修改为7001,二是开启集群创建模式,打开注释即可。分别如下图所示:
删除dump.rdb文件

 修改端口号为7001,默认是6379

将cluster-enabled yes 的注释打开 

         3-4.将redis-cluster/redis01文件复制5份到redis-cluster目录下(redis02-redis06),创建6个redis实例,模拟Redis集群的6个节点。然后将其余5个文件下的redis.conf里面的端口号分别修改为7002-7006。分别如下图所示:
创建redis02-06目录

分别修改redis.conf文件端口号为7002-7006 

         3-5.接着启动所有redis节点,由于一个一个启动太麻烦了,所以在这里创建一个批量启动redis节点的脚本文件,命令为start-all.sh,文件内容如下:

cd redis01
./redis-server redis.conf
cd ..
cd redis02
./redis-server redis.conf
cd ..
cd redis03
./redis-server redis.conf
cd ..
cd redis04
./redis-server redis.conf
cd ..
cd redis05
./redis-server redis.conf
cd ..
cd redis06
./redis-server redis.conf
cd ..

         3-6.创建好启动脚本文件之后,需要修改该脚本的权限,使之能够执行,指令如下:

chmod +x start-all.sh

         3-7.执行start-all.sh脚本,启动6个redis节点

         3-8.ok,至此6个redis节点启动成功,接下来正式开启搭建集群,以上都是准备条件。大家不要觉得图片多看起来冗长所以觉得麻烦,其实以上步骤也就一句话的事情:创建6个redis实例(6个节点)并启动。

        3-9.然后使用该脚本文件搭建集群,指令如下:

redis-cli --cluster create 192.168.8.100:7001 192.168.8.100:7002 192.168.8.100:7003 192.168.8.100:7004 192.168.8.100:7005 192.168.8.100:7006 --cluster-replicas 1

 注意:此处大家应该根据自己的服务器ip输入对应的ip地址!

执行命令结果

中途有个地方需要手动输入yes即可

 

 进入某个redis客户端

redis-cli -h 192.168.8.100 -p 7001 -c

注意:一定要加上-c,不然节点之间是无法自动跳转的!如下图可以看到,存储的数据(key-value)是均匀分配到不同的节点的: 

 

 

使用命令查看集群信息

cluster info    #查看当前集群信息
cluster nodes    #查看集群有多少节点
cluster slots    #cluser查看每个主节点管理的slot和从节点
redis-cli --cluster check 192.168.8.100:7001    #检查集群状况

集群信息

集群节点

 

 每个主从节点信息

1) 1) (integer) 0     // 管理的起始slot
   2) (integer) 5460// 管理的截止slot
   3) 1) "192.168.8.100"   // 主节点ip
      2) (integer) 7001// 主节点端口
      3) "caf219cd84e345c8e6b4680c0ec810dfa0c61172"  // 主节点id
   4) 1) "192.168.8.100"    // 从节点ip
      2) (integer) 7006// 从节点端口
      3) "f2576f50b0871c4eb8a0d4c7ed698e77c9dc8f20"   // 从节点id

集群状况 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值