Redis集群的安装

最新推荐文章于 2024-09-26 07:00:00 发布
最新推荐文章于 2024-09-26 07:00:00 发布
阅读量885 收藏 1
点赞数
分类专栏： 多线程

一、基本介绍

Redis集群至少需要3个主节点，要保证Redis的高可用性，那每个主节点至少需要一个从节点（如果没有从节点，那集群中的某个主节点挂掉了，那这个节点中的数据也就获取不到了），所以Redis集群就至少需要6个节点，3个主节点，3个从节点。

Redis集群的数据共享
Redis 集群使用数据分片（sharding）而非一致性哈希（consistency hashing）来实现： 一个 Redis 集群包含 16384 个哈希槽（hash slot）， 数据库中的每个键都属于这 16384 个哈希槽的其中一个， 集群使用公式 CRC16(key) % 16384 来计算键 key 属于哪个槽， 其中CRC16(key) 语句用于计算键 key 的 CRC16 校验和 。
集群中的每个节点负责处理一部分哈希槽。 举个例子， 一个集群可以有三个哈希槽， 其中：
• 节点 A 负责处理 0 号至 5500 号哈希槽。
• 节点 B 负责处理 5501 号至 11000 号哈希槽。
• 节点 C 负责处理 11001 号至 16384 号哈希槽。
这种将哈希槽分布到不同节点的做法使得用户可以很容易地向集群中添加或者删除节点。 比如说：
• 如果用户将新节点 D 添加到集群中， 那么集群只需要将节点 A 、B 、 C 中的某些槽移动到节点 D 就可以了。
• 与此类似， 如果用户要从集群中移除节点 A ， 那么集群只需要将节点 A 中的所有哈希槽移动到节点 B 和节点 C ， 然后再移除空白（不包含任何哈希槽）的节点 A 就可以了。
因为将一个哈希槽从一个节点移动到另一个节点不会造成节点阻塞， 所以无论是添加新节点还是移除已存在节点， 又或者改变某个节点包含的哈希槽数量， 都不会造成集群下线。
所以每次往Redis中set值的时候，会根据Redis的计算规则算出这个这个值的哈希值，然后再把数据放到对应处理这个哈希值的节点上，获取数据的时候也是一样的道理。

二、安装

1、服务器规划

注意：端口的规划请事先确认好是否已经被占用，建议各个服务器对应端口的数值带有一定的规律性，便于安装和维护


Paste_Image.png
2、在对应的服务器中打开对应的端口

切换至root用户
# vi /etc/sysconfig/iptables
192.168.31.143中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7111 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17111 -j ACCEPT
192.168.31.103中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7112 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17112 -j ACCEPT
192.168.31.154中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7113 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17113 -j ACCEPT
192.168.31.117中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7114 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17114 -j ACCEPT
192.168.31.146中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7115 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17115 -j ACCEPT
192.168.31.173中增加：
## redis -A INPUT -m state --state NEW -m tcp -p tcp --dport 7116 -j ACCEPT-A INPUT -m state --state NEW -m tcp -p tcp --dport 17116 -j ACCEPT
在各个服务器增加完端口后，进行端口配置重启
# service iptables restart

下面对Redis进行安装，安装目录：/usr/local/redis3，安装用户：root

3、编译和安装所需要的包

# yum install gcc tcl

4、下载或者上传Redis3的最新稳定版本到/usr/local/src

# cd /usr/local/src
# wget http://download.redis.io/releases/redis-3.0.3.tar.gz

5、创建安装目录：

# mkdir /usr/local/redis3

6、解压并进入目录

# tar -zxvf redis-3.0.3.tar.gz
# cd redis-3.0.3

7、编译安装（使用PREFIX指定安装目录）

# make PREFIX=/usr/local/redis3 install
安装完成后，可以看到/usr/local/redis3目录下有一个bin目录，bin目录里面就是redis的命令脚本，如下：
redis-benchmark redis-check-aof redis-check-dump redis-cli redis-sentinel redis-server

以上步骤在每台机器上都要执行安装

8、创建集群配置目录，并拷贝redis.conf配置文件到各个节点配置目录

192.168.31.143
# mkdir -p /usr/local/redis3/cluster/7111
# cp /usr/local/src/redis3.0/redis.conf/usr/local/redis3/cluster/7111/redis-7111.conf

192.168.31.103
# mkdir -p /usr/local/redis3/cluster/7112
# cp /usr/local/src/redis-3.0.3/redis.conf /usr/local/redis3/cluster/7112/redis-7112.conf

192.168.31.154
# mkdir -p /usr/local/redis3/cluster/7113
# cp /usr/local/src/redis-3.0.3/redis.conf /usr/local/redis3/cluster/7113/redis-7113.conf

192.168.31.117
# mkdir -p /usr/local/redis3/cluster/7114
# cp /usr/local/src/redis-3.0.3/redis.conf /usr/local/redis3/cluster/7114/redis-7114.conf

192.168.31.146
# mkdir -p /usr/local/redis3/cluster/7115
# cp /usr/local/src/redis-3.0.3/redis.conf /usr/local/redis3/cluster/7115/redis-7115.conf

192.168.31.173
# mkdir -p /usr/local/redis3/cluster/7116
# cp /usr/local/src/redis-3.0.3/redis.conf /usr/local/redis3/cluster/7116/redis-7116.conf

9、修改6个节点的redis.conf配置文件内容

Paste_Image.png

使用以下命令逐个启动这6个Redis节点实例
192.168.31.143
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7111/redis-7111.conf

192.168.31.103
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7112/redis-7112.conf

192.168.31.154
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7113/redis-7113.conf

192.168.31.117
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7114/redis-7114.conf

192.168.31.146
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7115/redis-7115.conf

192.168.31.173
# /usr/local/redis3/bin/redis-server /usr/local/redis3/cluster/7116/redis-7116.conf
逐个启动后，可以用ps -ef|grep redis命令来检测是否启动成功
root 3273 1 3 15:18 ? 00:00:00 /usr/local/redis3/bin/redis-server *:7111 [cluster]

接下来准备创建集群

10、安装ruby和rubygems（注意：需要ruby的版本在1.8.7及以上）

# yum install ruby rubygems
查看ruby的版本信息
# ruby -v
ruby 1.8.7 (2013-06-27 patchlevel 374) [x86_64-linux]

11、gem安装redis ruby接口

# gem install redis
出现如下信息：
Successfully installed redis-3.3.1
1 gem installed
Installing ri documentation for redis-3.3.1...
Installing RDoc documentation for redis-3.3.1...

12、执行Redis集群创建命令（只需要在其中一个节点上执行即可）

拷贝集群创建文件：
# cp /usr/local/src/redis-3.0.3/src/redis-trib.rb /usr/local/bin/redis-trib
执行集群创建脚本：
# redis-trib create --replicas 1 192.168.31.117:7114 192.168.31.146:7115 192.168.31.173:7116 192.168.31.143:7111 192.168.31.103:7112 192.168.31.154:7113
集群创建过程说明：
给定redis-trib程序的命令是create，这表示我们希望创建一个新的集群，--replicas 1表示每个主节点下面有一个从节点，后面的参数则是redis实例的地址列表，程序使用这些地址所指示的实例来创建新的集群。
在第一次执行的时候，输出信息如下：

>>> Creating cluster
Connecting to node 192.168.31.117:7114: OK
Connecting to node 192.168.31.146:7115: OK
Connecting to node 192.168.31.173:7116: OK
Connecting to node 192.168.31.143:7111: OK
Connecting to node 192.168.31.103:7112: OK
Connecting to node 192.168.31.154:7113: OK
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
192.168.31.154:7113
192.168.31.173:7116
192.168.31.143:7111
Adding replica 192.168.31.146:7115 to 192.168.31.154:7113
Adding replica 192.168.31.117:7114 to 192.168.31.173:7116
Adding replica 192.168.31.103:7112 to 192.168.31.143:7111
S: 26a53ca5649a85d75d7f78c17897846fad8548c3 192.168.31.117:7114
   replicates 3dc26de1ddb9304dc3451e7044c91b3fd5cb77b9
S: 51dfb182af4fdc33c69218fe6f8421c0311f67f0 192.168.31.146:7115
   replicates e9b5cd667523705b7f4052dd847a45c9abd4ff2e
M: 3dc26de1ddb9304dc3451e7044c91b3fd5cb77b9 192.168.31.173:7116
   slots:5461-10922 (5462 slots) master
M: 45d00776095446fcf7e194a53e50311da4e2c87e 192.168.31.143:7111
   slots:10923-16383 (5461 slots) master
S: aa1577c0295783245870e114ffdcabd0ee9bfd07 192.168.31.103:7112
   replicates 45d00776095446fcf7e194a53e50311da4e2c87e
M: e9b5cd667523705b7f4052dd847a45c9abd4ff2e 192.168.31.154:7113
   slots:0-5460 (5461 slots) master
Can I set the above configuration? (type 'yes' to accept):

从以上信息可以看到master节点为7111、7113、7116，这和我们预先计划的不一致，预先计划的master节点是7111、7112、7113，所以在确认这一步，我们输入no，然后再执行上面的脚本，在试过几次后终于得到了我们预想的设置（好像是随机的，没有规律，这一步要注意核对主从关系是否是你所预想的） 
>>> Creating cluster
Connecting to node 192.168.31.117:7114: OK
Connecting to node 192.168.31.146:7115: OK
Connecting to node 192.168.31.173:7116: OK
Connecting to node 192.168.31.143:7111: OK
Connecting to node 192.168.31.103:7112: OK
Connecting to node 192.168.31.154:7113: OK
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
192.168.31.103:7112
192.168.31.154:7113
192.168.31.143:7111
Adding replica 192.168.31.146:7115 to 192.168.31.103:7112
Adding replica 192.168.31.173:7116 to 192.168.31.154:7113
Adding replica 192.168.31.117:7114 to 192.168.31.143:7111
S: 26a53ca5649a85d75d7f78c17897846fad8548c3 192.168.31.117:7114
   replicates 45d00776095446fcf7e194a53e50311da4e2c87e
S: 51dfb182af4fdc33c69218fe6f8421c0311f67f0 192.168.31.146:7115
   replicates aa1577c0295783245870e114ffdcabd0ee9bfd07
S: 3dc26de1ddb9304dc3451e7044c91b3fd5cb77b9 192.168.31.173:7116
   replicates e9b5cd667523705b7f4052dd847a45c9abd4ff2e
M: 45d00776095446fcf7e194a53e50311da4e2c87e 192.168.31.143:7111
   slots:10923-16383 (5461 slots) master
M: aa1577c0295783245870e114ffdcabd0ee9bfd07 192.168.31.103:7112
   slots:0-5460 (5461 slots) master
M: e9b5cd667523705b7f4052dd847a45c9abd4ff2e 192.168.31.154:7113
   slots:5461-10922 (5462 slots) master
Can I set the above configuration? (type 'yes' to accept):

输入yes，集群就会将配置应用到各个节点，并join各个节点，让各个节点开始通讯，输出如下信息 
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join.....
>>> Performing Cluster Check (using node 192.168.31.117:7114)
M: 26a53ca5649a85d75d7f78c17897846fad8548c3 192.168.31.117:7114
   slots: (0 slots) master
   replicates 45d00776095446fcf7e194a53e50311da4e2c87e
M: 51dfb182af4fdc33c69218fe6f8421c0311f67f0 192.168.31.146:7115
   slots: (0 slots) master
   replicates aa1577c0295783245870e114ffdcabd0ee9bfd07
M: 3dc26de1ddb9304dc3451e7044c91b3fd5cb77b9 192.168.31.173:7116
   slots: (0 slots) master
   replicates e9b5cd667523705b7f4052dd847a45c9abd4ff2e
M: 45d00776095446fcf7e194a53e50311da4e2c87e 192.168.31.143:7111
   slots:10923-16383 (5461 slots) master
M: aa1577c0295783245870e114ffdcabd0ee9bfd07 192.168.31.103:7112
   slots:0-5460 (5461 slots) master
M: e9b5cd667523705b7f4052dd847a45c9abd4ff2e 192.168.31.154:7113
   slots:5461-10922 (5462 slots) master
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

可以看出：
192.168.31.117:7114从节点所属的主节点为192.168.31.143:7111
192.168.31.146:7115从节点所属的主节点为192.168.31.103:7112
192.168.31.173:7116从节点所属的主节点为192.168.31.154:7113（通过replicates 后面的值去匹配，相当于外键ID）
192.168.31.103:7112分配的槽点是是0-5460段
192.168.31.154:7113分配的槽点是5461-10922段
192.168.31.143:7111分配的槽点是10923-16383段
（集群中的每个节点负责处理一部分哈希槽）
最后一行信息表示集群中的16384个槽都有至少一个主节点在处理，集群运行正常
####13、查看redis集群的从属状态关系
# /usr/local/redis3/bin/redis-cli -p 7111 cluster nodes
输出： 
26a53ca5649a85d75d7f78c17897846fad8548c3 192.168.31.117:7114 slave 45d00776095446fcf7e194a53e50311da4e2c87e 0 1471133132198 4 connected
3dc26de1ddb9304dc3451e7044c91b3fd5cb77b9 192.168.31.173:7116 slave e9b5cd667523705b7f4052dd847a45c9abd4ff2e 0 1471133130178 6 connected
aa1577c0295783245870e114ffdcabd0ee9bfd07 192.168.31.103:7112 master - 0 1471133133207 5 connected 0-5460
51dfb182af4fdc33c69218fe6f8421c0311f67f0 192.168.31.146:7115 slave aa1577c0295783245870e114ffdcabd0ee9bfd07 0 1471133134217 5 connected
45d00776095446fcf7e194a53e50311da4e2c87e 192.168.31.143:7111 myself,master - 0 0 4 connected 10923-16383
e9b5cd667523705b7f4052dd847a45c9abd4ff2e 192.168.31.154:7113 master - 0 1471133131189 6 connected 5461-10922
14、集群的简单测试

随便挑一个节点，启动redis终端
# /usr/local/redis3/bin/redis-cli -c -p 7114

127.0.0.1:7114> set key1 dreyer
-> Redirected to slot [9189] located at 192.168.31.154:7113
OK
192.168.31.154:7113> get key1
"dreyer"
192.168.31.154:7113>

可以看到set的key重定向192.168.31.154:711这个节点，因为redis集群会有一个使用公式CRC16(key) % 16384来计算key属于哪个槽

我们切换到192.168.31.154:7113这个节点上来获取刚刚设置key的值，因为设置的key值就落在这个节点上，所以能直接获取到数据
# /usr/local/redis3/bin/redis-cli -c -p 7113

127.0.0.1:7113> get key1
"dreyer"

我们再切换到192.168.31.143:7111这个节点上来获取刚刚设置的key值
# /usr/local/redis3/bin/redis-cli -c -p 7111 
127.0.0.1:7111> get key1
-> Redirected to slot [9189] located at 192.168.31.154:7113
"dreyer"

可以看到这7111这个节点获取数据的时候，会重定向至192.168.31.154:7113节点上获取数据

至此，完成！

街角幸福
关注
专栏目录
Redis集群安装部署
08-17
Redis集群安装部署知识点详解： 1. Redis集群基础概念： Redis集群是Redis的分布式解决方案，它通过将数据分布在不同的节点上，以保证数据的可用性。在Redis集群中至少需要三个主节点来提供故障转移和支持。Redis...
redis集群安装手册（终稿）.docx
01-14
由于Redis集群至少需要6台机器，每台机器上需要安装Redis服务器。此外，对于Redis版本4.0及以下，还需要在系统中安装Ruby，因为这些版本的集群创建工具`redis-trib.rb`是用Ruby编写的。Ruby的安装包括下载、编译、...
redis集群为什么最少需要6个节点组成
255.255.255.0
07-16 8104
Redis集群至少需要3个master节点 1master对应1slave ,所以redis集群需要6个节点
Linux下 Redis 一个机器部署3个节点
牛肉胡辣汤
07-03 1006
通过以上步骤，我们成功在一个Linux机器上部署了一个包含三个Redis节点的集群，实现了负载均衡和高可用性。当某个节点出现故障时，其他节点仍然可以正常工作，确保系统的可用性。当然，实际部署过程中还需要考虑诸如硬件资源、网络配置等因素，以及合理的配置参数调优等问题。以上只是一个简单示例，供参考。希望本文对你理解在Linux下使用一个机器部署三个Redis节点有所帮助。祝你成功！
Redis实战--Redis集群的搭建与使用
最新发布
天冬忘忧的博客
09-26 956
Redis是一个开源的高性能key-value数据库，它以其出色的性能和丰富的特性而广受欢迎。随着业务的发展，单机Redis可能无法满足大规模数据存储和高并发访问的需求。这时，Redis集群就显得尤为重要。本文将详细介绍Redis集群的概念、搭建过程以及使用Jedis操作Redis集群的实践。
Linux搭建Redis集群
zhangkai19910815的博客
11-21 656
Linux搭建Redis集群 1 说明 1.1 编写目的 本文编写旨在介绍Redis的集群架构配置，了解Redis的基本使用。 1.2 适用范围 本文适用于对Redis集群比较有兴趣的童鞋。本文仅介绍了Redis的基本知识、集群架构，以及Redis的基本使用；大神请飘过。 2 配置准备 2.1 服务器准备 一般情况下，Redis集群至少需要6个节点，3主3从。本文就以2台机器6个节点作为安装环境......
Redis搭建集群【简单】
Doc_ACwhite的博客
06-26 2605
redis简单的搭建一个集群
redis集群配置
cx3309的博客
10-27 516
Redis集群至少需要3个节点，因为投票容错机制要求超过半数节点认为某个节点挂了该节点才是挂了，所以2个节点无法构成集群。要保证集群的高可用，需要每个节点都有从节点，也就是备份节点，所以Redis集群至少需要6台服务器。因为我没有那么多服务器，也启动不了那么多虚拟机，所在这里搭建的是伪分布式集群，即一台服务器虚拟运行6个redis实例，修改端口号为（7001-7006），当然实际生产环境的Redis集群搭建和这里是一样的。
Redis缓存高可用集群
EnjoyFight的博客
11-15 1382
奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能选举新master节点，如果都挂了两个master节点都没法选举新master节点了，所以。，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般，特别是在主从切换的瞬间存在访问瞬断的情况，而且。真实世界的机房网络往往并不是风平浪静的，它们经常会发生各种各样的小问题。
Redis 2023面试5题（六）
lovoo的博客
06-24 1304
因为新master的选举需要大于半数的集群master节点同意才能选举成功，奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能洗举新master节点，如果都挂了两个master节点都没法选举新master节点了，所以奇数的master节点更多的是。具体来说，当一个线程获取了分布式锁并执行业务逻辑时，如果主Redis实例挂掉了，那么在主从切换过程中，从Redis实例上就不会有该线程持有的锁。
Redis集群为什么至少需要三个master节点，并且推荐节点数为奇数？
xisheng_lx的博客
10-27 8042
问题一：Redis集群为什么至少需要三个master节点？ 因为新master的选举需要大于半数的集群master节点同意才能选举成功，如果只有两个master节点，当其中一个挂了，是达不到选举新master的条件的。     问题二：Redis集群为什么推荐节点数为奇数？ 奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能选举新master节点，如果都挂了两个master节点都
redis集群搭建
cxws110的博客
06-27 1088
转自：https://blog.csdn.net/aloneno/article/details/96370167 一、redisz主从集群最少需要6个节点 首先我们既然要搭建集群，那么master节点至少要3个，slave节点也是3个，为什么呢？这是因为一个redis集群如果要对外提供可用的服务，那么集群中必须要有过半的master节点正常工作。基于这个特性，如果想搭建一个能够允许 n 个master节点挂掉的集群，那么就要搭建2n+1个master节点的集群。（感觉和Zookeeper的vote机制差
redis集群为什么至少需要三个master节点
小泽
02-18 399
redis
Redis cluster集群搭建
江城宴的博客
09-01 359
集群至少需要6个节点（3主3从模式），每一个节点可以搭建在同一台机器上，也可以搭建在不同的服务器上。 [root@localhost ~]# wget https://download.redis.io/releases/redis-6.2.5.tar.gz [root@localhost ~]# tar -zxvf redis-6.2.5.tar.gz [root@localhost ~]# cd redis-6.2.5 [root@localhost redis-6.2.5]# make [r
redis集群搭建+三节点
qq_48736646的博客
01-11 605
注意：21001/ 和21002/路径下的 redis.conf 中端口不一样,还有一些其他的配置（pidfile logfile cluster-config-file） 分别为21001 21002。环境：三台centos7 redis：5.0.7。注意点：密码包含特殊字符可能需要转义。目的：得到6个节点的集群，三主三从。7 特殊情况 当集群创建失败时。（1）使用绝对路径启动。
为什么Redis Cluster中至少应该有三个结点？
wenyixicodedog的博客
06-25 4809
①、对于RedisCluster中为什么Node至少是三个 个人理解RedisCluster在使用gossip协议进行通信的时候，也就是交换的数据信息(消息体和消息头组成)。在消息体中，会携带一定数量的其他节点信息用于交换。其他节点的信息约为集群总节点数量的1/10，但至少携带3个节点的信息。 ②、对于Redis集群节点数量为什么要是奇数个？ 1、防止由脑裂造成的集群不可用(可用节点数量 > 总节点数量/2)。 2、在容错能力相同的情况下，奇数台更节省资源(3个节点的集群，允许有一个节点宕机,
redis 集群安装
10-16
好的，关于 Redis 集群安装，我可以给你提供以下步骤： 1. 下载 Redis 源码包并解压 2. 进入解压后的目录，执行 make 命令编译 Redis 3. 在每个节点上创建 Redis 配置文件，配置节点的 IP 地址、端口号、密码等信息 4. 启动 Redis 节点，使用 redis-trib.rb 工具创建集群 具体的步骤可以参考 Redis 官方文档：https://redis.io/topics/cluster-tutorial
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值