【Redis】redis集群搭建（非常详细，适合新手） V2

最新推荐文章于 2024-07-22 16:33:58 发布
最新推荐文章于 2024-07-22 16:33:58 发布
阅读量459 收藏
点赞数
分类专栏： 数据库
原文链接：https://blog.csdn.net/qq_42815754/article/details/82912130
版权

转载自：https://blog.csdn.net/qq_42815754/article/details/82912130

redis集群搭建

在开始redis集群搭建之前，我们先简单回顾一下redis单机版的搭建过程

  1. 下载redis压缩包，然后解压压缩文件；
  2. 进入到解压缩后的redis文件目录（此时可以看到Makefile文件），编译redis源文件；
  3. 把编译好的redis源文件安装到/usr/local/redis目录下，如果/local目录下没有redis目录，会自动新建redis目录；
  4. 进入/usr/local/redis/bin目录，直接./redis-server启动redis（此时为前端启动redis）；
  5. 将redis启动方式改为后端启动，具体做法：把解压缩的redis文件下的redis.conf文件复制到/usr/local/redis/bin目录下，然后修改该redis.conf文件->daemonize：no 改为daemonize：yse；
  6. 在/bin目录下通过./redis-server redis.conf启动redis（此时为后台启动）。
    综上redis单机版安装启动完成。
    具体详细带图步骤请参考 -> redis入门
    请原谅我的啰嗦，ok，接着咱们回到本次话题----redis集群搭建！

（在线安装：

在线安装：

Ubuntu：

apt-get update

apt-get install redis-server 

 

在线安装查看安装位置：

2、查找redis的安装包

[root@iZbp1eem925ojwyx17ao9kZ ~]# rpm -qa|grep redis

redis-3.2.10-2.el7.x86_64

3、查找安装包的安装路径

[root@iZbp1eem925ojwyx17ao9kZ ~]# rpm -ql redis-3.2.10-2.el7.x86_64

）

一、Redis Cluster（Redis集群）简介

  • redis是一个开源的key value存储系统，受到了广大互联网公司的青睐。redis3.0版本之前只支持单例模式，在3.0版本及以后才支持集群，我这里用的是redis3.0.0版本；
  • redis集群采用P2P模式，是完全去中心化的，不存在中心节点或者代理节点；
  • redis集群是没有统一的入口的，客户端（client）连接集群的时候连接集群中的任意节点（node）即可，集群内部的节点是相互通信的（PING-PONG机制），每个节点都是一个redis实例；
  • 为了实现集群的高可用，即判断节点是否健康（能否正常使用），redis-cluster有这么一个投票容错机制：如果集群中超过半数的节点投票认为某个节点挂了，那么这个节点就挂了（fail）。这是判断节点是否挂了的方法；
  • 那么如何判断集群是否挂了呢? -> 如果集群中任意一个节点挂了，而且该节点没有从节点（备份节点），那么这个集群就挂了。这是判断集群是否挂了的方法；
  • 那么为什么任意一个节点挂了（没有从节点）这个集群就挂了呢？ -> 因为集群内置了16384个slot（哈希槽），并且把所有的物理节点映射到了这16384[0-16383]个slot上，或者说把这些slot均等的分配给了各个节点。当需要在Redis集群存放一个数据（key-value）时，redis会先对这个key进行crc16算法，然后得到一个结果。再把这个结果对16384进行求余，这个余数会对应[0-16383]其中一个槽，进而决定key-value存储到哪个节点中。所以一旦某个节点挂了，该节点对应的slot就无法使用，那么就会导致集群无法正常工作。
  • 综上所述，每个Redis集群理论上最多可以有16384个节点。

二、集群搭建需要的环境
2.1 Redis集群至少需要3个节点，因为投票容错机制要求超过半数节点认为某个节点挂了该节点才是挂了，所以2个节点无法构成集群。
2.2 要保证集群的高可用，需要每个节点都有从节点，也就是备份节点，所以Redis集群至少需要6台服务器。因为我没有那么多服务器，也启动不了那么多虚拟机，所在这里搭建的是伪分布式集群，即一台服务器虚拟运行6个redis实例，修改端口号为（7001-7006），当然实际生产环境的Redis集群搭建和这里是一样的。
2.3 安装ruby
三、集群搭建具体步骤如下（注意要关闭防火墙）
3.1 在usr/local目录下新建redis-cluster目录，用于存放集群节点
新建Redis集群目录
3.2 把redis目录下的bin目录下的所有文件复制到/usr/local/redis-cluster/redis01目录下，不用担心这里没有redis01目录，会自动创建的。操作命令如下（注意当前所在路径）：

cp -r redis/bin/ redis-cluster/redis01
  • 1

在这里插入图片描述
3.3 删除redis01目录下的快照文件dump.rdb，并且修改该目录下的redis.cnf文件，具体修改两处地方：一是端口号修改为7001，二是开启集群创建模式，打开注释即可。分别如下图所示：
删除dump.rdb文件
删除dump.rdb文件
修改端口号为7001,默认是6379
在这里插入图片描述
将cluster-enabled yes 的注释打开
在这里插入图片描述
3.4 将redis-cluster/redis01文件复制5份到redis-cluster目录下（redis02-redis06），创建6个redis实例，模拟Redis集群的6个节点。然后将其余5个文件下的redis.conf里面的端口号分别修改为7002-7006。分别如下图所示：
创建redis02-06目录
在这里插入图片描述

分别修改redis.conf文件端口号为7002-7006
在这里插入图片描述
3.5 接着启动所有redis节点，由于一个一个启动太麻烦了，所以在这里创建一个批量启动redis节点的脚本文件，命令为start-all.sh，文件内容如下：

cd redis01
./redis-server redis.conf &
cd -
cd redis02
./redis-server redis.conf &
cd -
cd redis03
./redis-server redis.conf &
cd -
cd redis04
./redis-server redis.conf &
cd -
cd redis05
./redis-server redis.conf &
cd -
cd redis06
./redis-server redis.conf &
cd -

3.6 创建好启动脚本文件之后，需要修改该脚本的权限，使之能够执行，指令如下：

chmod +x start-all.sh
  • 1

在这里插入图片描述
3.7 执行start-all.sh脚本，启动6个redis节点
在这里插入图片描述
3.8 ok，至此6个redis节点启动成功，接下来正式开启搭建集群，以上都是准备条件。大家不要觉得图片多看起来冗长所以觉得麻烦，其实以上步骤也就一句话的事情：创建6个redis实例（6个节点）并启动。
要搭建集群的话，需要使用一个工具（脚本文件），这个工具在redis解压文件的源代码里。因为这个工具是一个ruby脚本文件，所以这个工具的运行需要ruby的运行环境，就相当于java语言的运行需要在jvm上。所以需要安装ruby，指令如下：

yum install ruby
  • 1

然后需要把ruby相关的包安装到服务器，我这里用的是redis-3.0.0.gem，大家需要注意的是：redis的版本和ruby包的版本最好保持一致。
将Ruby包安装到服务器：需要先下载再安装，如图
在这里插入图片描述
安装命令如下：

gem install redis-3.0.0.gem
  • 1

在这里插入图片描述

3.9 上一步中已经把ruby工具所需要的运行环境和ruby包安装好了，接下来需要把这个ruby脚本工具复制到usr/local/redis-cluster目录下。那么这个ruby脚本工具在哪里呢？之前提到过，在redis解压文件的源代码里，即redis/src目录下的redis-trib.rb文件。
在这里插入图片描述
在这里插入图片描述
3.10 将该ruby工具（redis-trib.rb）复制到redis-cluster目录下，指令如下：

cp redis-trib.rb /usr/local/redis-cluster

 

然后使用该脚本文件搭建集群，指令如下：

./redis-trib.rb create --replicas 1 47.106.219.251:7001 47.106.219.251:7002 47.106.219.251:7003 47.106.219.251:7004 47.106.219.251:7005 47.106.219.251:7006

 （redis-trib.rb是官方提供的Redis Cluster的管理工具，--replicas参数指定集群中每个主节点配备几个从节点，这里设置为1：https://www.jianshu.com/p/21f67bd739cc）

 

注意：此处大家应该根据自己的服务器ip输入对应的ip地址！
在这里插入图片描述

中途有个地方需要手动输入yes即可
在这里插入图片描述
至此，Redi集群搭建成功！大家注意最后一段文字，显示了每个节点所分配的slots（哈希槽），这里总共6个节点，其中3个是从节点，所以3个主节点分别映射了0-5460、5461-10922、10933-16383solts。

3.11 最后连接集群节点，连接任意一个即可：

redis01/redis-cli -p 7001 -c
  •  

注意：一定要加上-c，不然节点之间是无法自动跳转的！如下图可以看到，存储的数据（key-value）是均匀分配到不同的节点的：
在这里插入图片描述

四、结语
呼~~~长舒一口气…终于搭建好了Redis集群。
整个过程其实挺简单，本篇主要正对入门级别的小伙伴，插入了很多图片，所以显得冗长，希望大家多多理解，如果不当之处，还望及时指正~

最后，加上两条redis集群基本命令：
1.查看当前集群信息

redis01/redis-cli -p 7001 -c  登录

>

cluster info
  •  

2.查看集群里有多少个节点

redis01/redis-cli -p 7001 -c  登录

>

cluster nodes

 

 

三、redis集群的测试

     1、测试存取值

         客户端连接集群redis-cli需要带上 -c ，redis-cli -c -p 端口号

     

  1. [root@localhost redis01]# ./redis-cli -c -p 7001  
  2. 127.0.0.1:7001> set name andy  
  3. -> Redirected to slot [5798] located at 127.0.0.1:7002  
  4. OK  
  5. 127.0.0.1:7002> get name  
  6. "andy"  
  7. 127.0.0.1:7002>   

 

 

        根据redis-cluster的key值分配，name应该分配到节点7002[5461-10922]上，上面显示redis cluster自动从7001跳转到了7002节点。

       我们可以测试一下7006从节点获取name值

  1. [root@localhost redis06]# ./redis-cli -c -p 7006  
  2. 127.0.0.1:7006> get name  
  3. -> Redirected to slot [5798] located at 127.0.0.1:7002  
  4. "andy"  
  5. 127.0.0.1:7002>   

 

        7006位7003的从节点，从上面也是自动跳转至7002获取值，这也是redis cluster的特点，它是去中心化，每个节点都是对等的，连接哪个节点都可以获取和设置数据。

 

四、集群节点选举

         现在模拟将7002节点挂掉，按照redis-cluster原理会选举会将 7002的从节点7005选举为主节点。

        

  1. [root@localhost redis-cluster]# ps -ef | grep redis  
  2. root       7950      1  0 12:50 ?        00:00:28 ./redis-server 127.0.0.1:7001 [cluster]  
  3. root       7952      1  0 12:50 ?        00:00:29 ./redis-server 127.0.0.1:7002 [cluster]  
  4. root       7956      1  0 12:50 ?        00:00:29 ./redis-server 127.0.0.1:7003 [cluster]  
  5. root       7960      1  0 12:50 ?        00:00:29 ./redis-server 127.0.0.1:7004 [cluster]  
  6. root       7964      1  0 12:50 ?        00:00:29 ./redis-server 127.0.0.1:7005 [cluster]  
  7. root       7966      1  0 12:50 ?        00:00:29 ./redis-server 127.0.0.1:7006 [cluster]  
  8. root      11346  10581  0 14:57 pts/2    00:00:00 grep --color=auto redis  
  9. [root@localhost redis-cluster]# kill 7952  

        在查看集群中的7002节点

[root@localhost redis-cluster]#   

[root@localhost redis-cluster]# ./redis-trib.rb check 127.0.0.1:7002  

[ERR] Sorry, can't connect to node 127.0.0.1:7002  

[root@localhost redis-cluster]# ./redis-trib.rb check 127.0.0.1:7005  

>>> Performing Cluster Check (using node 127.0.0.1:7005)  

  1. M: a5db243087d8bd423b9285fa8513eddee9bb59a6 127.0.0.1:7005  
  2.    slots:5461-10922 (5462 slots) master  
  3.    0 additional replica(s)  
  4. S: 50ce1ea59106b4c2c6bc502593a6a7a7dabf5041 127.0.0.1:7004  
  5.    slots: (0 slots) slave  
  6.    replicates dd19221c404fb2fc4da37229de56bab755c76f2b  
  7. M: f9886c71e98a53270f7fda961e1c5f730382d48f 127.0.0.1:7003  
  8.    slots:10923-16383 (5461 slots) master  
  9.    1 additional replica(s)  
  10. M: dd19221c404fb2fc4da37229de56bab755c76f2b 127.0.0.1:7001  
  11.    slots:0-5460 (5461 slots) master  
  12.    1 additional replica(s)  
  13. S: 8bb3ede48319b46d0015440a91ab277da9353c8b 127.0.0.1:7006  
  14.    slots: (0 slots) slave  
  15.    replicates f9886c71e98a53270f7fda961e1c5f730382d48f  
  16. [OK] All nodes agree about slots configuration.  
  17. >>> Check for open slots...  
  18. >>> Check slots coverage...  
  19. [OK] All 16384 slots covered.  
  20. [root@localhost redis-cluster]#   


      可以看到集群连接不了7002节点，而7005有原来的S转换为M节点，代替了原来的7002节点。我们可以获取name值：

 

  1. [root@localhost redis01]# ./redis-cli -c -p 7001  
  2. 127.0.0.1:7001> get name  
  3. -> Redirected to slot [5798] located at 127.0.0.1:7005  
  4. "andy"  
  5. 127.0.0.1:7005>   
  6. 127.0.0.1:7005>   


   从7001节点连入，自动跳转到7005节点，并且获取name值。

    现在我们将7002节点恢复，看是否会自动加入集群中以及充当的M还是S节点。

 

  1. [root@localhost redis-cluster]# cd redis02  
  2. [root@localhost redis02]# ./redis-server redis.conf   
  3. [root@localhost redis02]#   

     在check一下7002节点

 

  1. [root@localhost redis-cluster]# ./redis-trib.rb check 127.0.0.1:7002  
  2. >>> Performing Cluster Check (using node 127.0.0.1:7002)  
  3. S: 1f07d76585bfab35f91ec711ac53ab4bc00f2d3a 127.0.0.1:7002  
  4.    slots: (0 slots) slave  
  5.    replicates a5db243087d8bd423b9285fa8513eddee9bb59a6  
  6. M: f9886c71e98a53270f7fda961e1c5f730382d48f 127.0.0.1:7003  
  7.    slots:10923-16383 (5461 slots) master  
  8.    1 additional replica(s)  
  9. M: a5db243087d8bd423b9285fa8513eddee9bb59a6 127.0.0.1:7005  
  10.    slots:5461-10922 (5462 slots) master  
  11.    1 additional replica(s)  
  12. S: 50ce1ea59106b4c2c6bc502593a6a7a7dabf5041 127.0.0.1:7004  
  13.    slots: (0 slots) slave  
  14.    replicates dd19221c404fb2fc4da37229de56bab755c76f2b  
  15. S: 8bb3ede48319b46d0015440a91ab277da9353c8b 127.0.0.1:7006  
  16.    slots: (0 slots) slave  
  17.    replicates f9886c71e98a53270f7fda961e1c5f730382d48f  
  18. M: dd19221c404fb2fc4da37229de56bab755c76f2b 127.0.0.1:7001  
  19.    slots:0-5460 (5461 slots) master  
  20.    1 additional replica(s)  
  21. [OK] All nodes agree about slots configuration.  
  22. >>> Check for open slots...  
  23. >>> Check slots coverage...  
  24. [OK] All 16384 slots covered.  
  25. [root@localhost redis-cluster]#   

    可以看到7002节点变成了a5db243087d8bd423b9285fa8513eddee9bb59a6 7005的从节点。

 

命令：

查看集群主从情况的命令：./redis01/redis-cli -h 127.0.0.1 -p 7005 -c cluster slots | xargs  -n8 | awk '{print $3":"$4"->"$6":"$7}' | sort -nk2 -t ':' | uniq

 

错误记录：

1.报错：ERR Slot 0 is already busy (Redis::CommandError)

错误提示是说：slot插槽被占用了、这是因为 搭建集群前时，以前redis的旧数据和配置信息没有清理干净。

解决方案：

             用redis-cli 登录到每个节点执行  flushall  和 cluster reset  就可以了。

./redis-cli -h IP -p 端口
flushall
cluster reset

 

 

 

redis-cluster 命令

check命令

[root@ysmcrouter15a35 src]# ./redis-trib.rb check 10.166.15.35:7001

info命令查看信息

[root@ysmcrouter15a35 src]# ./redis-trib.rb info 10.166.15.35:7001

 

 

bandaoyu
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
redis 集群搭建
09-30
redis 集群搭建 ，单节点，集群搭建，工具包
非常详细的redis集群搭建教程
09-26
### 知识点一：Redis集群的基本概念与优势 Redis 集群是一种高可用性的...以上步骤详细介绍了如何在CentOS 7环境下搭建一个包含6个节点的Redis集群。在整个过程中需要注意各个步骤的细节处理，以确保集群的正常运行。
redis集群搭建（非常详细，适合新手）
热门推荐
橙子君的博客
10-01 37万+
redis集群搭建 在开始redis集群搭建之前，我们先简单回顾一下redis单机版的搭建过程 下载redis压缩包，然后解压压缩文件； 进入到解压缩后的redis文件目录（此时可以看到Makefile文件），编译redis源文件； 把编译好的redis源文件安装到/usr/local/redis目录下，如果/local目录下没有redis目录，会自动新建redis目录； 进入/usr/loca...
Redis集群详解（包含搭建）
最新发布
m0_73774439的博客
07-22 1569
Sentinel的三个作用是什么？集群监控故障恢复状态通知Sentinel如何判断一个redis实例是否健康？每隔1秒发送一次ping命令，如果超过一定时间没有相向则认为是主观下线（sdown如果大多数sentinel都认为实例主观下线，则判定服务客观下线（odown故障转移步骤有哪些？首先要在sentinel中选出一个leader，由leader执行failover选定一个slave作为新的master，执行，切换到master模式然后让所有节点都执行slaveof新master。
redis集群搭建
weixin_30511039的博客
11-29 167
初学redis，学习了redis的常用数据结构，然后就到了学习redis集群的时候了 那么，学习前面应该先搭建起来redis集群 以下搭建步骤是在各种找资料搭建起来的，亲测可以使用 首先安装redis 　　在这里安装的是redis源码包，所以需要gcc环境支持 　　yum install gcc-c++ 　　将从redis官网上下载的redis安装包上传至 /usr/local ...
redis-cluster集群搭建
01-20
配置redis.conf配置文件 bind 定义的是当前服务端允许接收客户端登录时指定使用的ip地址 如果绑定127.0.0.1的意思是只能由本地客户端登录,外界客户端无法登录. 61行 是否开启保护模式,在开启yes时,当前redis只允许...
Redis分布式集群搭建
02-24
上图蓝色为redis集群的节点。节点之间通过ping命令来测试连接是否正常，节点之间没有主区分，连接到任何一个节点进行操作时，都可能会转发到其他节点。节点之间会定时的互相发送ping命令，测试节点的健康状态，当...
redis3.0.0集群搭建
09-02
在集群搭建过程中，Ruby的`redis-trib.rb`工具非常关键。确保你已经安装了Ruby，并通过Gem安装`redis`和`redis-trib`库： ```sh gem install redis gem install redis-trib ``` 接着，使用`redis-trib.rb`创建集群...
redis集群搭建手册.docx
02-18
**Redis集群搭建手册** Redis，全称Remote Dictionary Server，是一种高性能的键值对数据库，以其丰富的数据类型、高效的内存管理以及支持持久化等特性，在分布式系统中被广泛应用于缓存、消息中间件以及数据存储等...
Redis的集群搭建
人生的尽头是孤独
06-20 158
记录一下Redis的集群搭建。记录了一些在部署集群节点的时候遇到的一些坑和Docker的网络类型配置
CentOS7下Redis集群搭建详细教程
"该资源是一个关于在CentOS7环境下搭建Redis集群的Markdown文档，内容包括单机安装Redis、Redis主从复制以及Redis分片集群的步骤。文档详细介绍了如何从安装Redis依赖到配置并启动Redis服务，以及如何构建包含一个主...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值