redis高可用之集群的搭建
1.节点
Redis Cluster是分布式架构:即Redis Cluster中有多个节点,每个节点都负责进行数据读写操作,每个节点之间会进行通信。
meet操作:
节点之间会相互通信,而meet操作是节点之间完成相互通信的基础,meet操作有一定的频率和规则
2.分配槽
把16384个槽平均分配给节点进行管理,每个节点只能对自己负责的槽进行读写操作。
由于每个节点之间都彼此通信,每个节点都知道另外节点负责管理的槽范围。
客户端访问任意节点时:对数据key按照CRC16规则进行hash运算,然后对运算结果对16383进行取作,如果余数在当前访问的节点管理的槽范围内,则直接返回对应的数据如果不在当前节点负责管理的槽范围内,则会告诉客户端去哪个节点获取数据,由客户端去正确的节点获取数据
3.Redis的集群搭建
集群搭建
实验环境:
server1 172.25.70.1 关闭firewalld
在serevr1上设置6个redis实例,3个主,3个从。
1 将之前做的redis关掉:
/etc/init.d/redis_6379 stop
2 搭建集群环境使用7001到7006搭建六个集群节点:
mkdir /usr/local/rediscluster
cd /usr/local/rediscluster
ls
mkdir 700{1..6}
3 每个节点的目录在里面写配置文件redis.conf:
cd 7001
vim redis.conf
写入:
port 7001 #指定端口
cluster-enabled yes #开启集群模式
cluster-config-file nodes.conf #集群的配置,配置文件首次启动自动生成 7001,7002,7003,7004,7005,7006
cluster-node-timeout 5000 #请求超时 默认15秒,可自行设置
appendonly yes #aof日志开启 有需要就开启,它会每次写操作都记录一条日志
pidfile "/usr/local/rediscluster/7001/redis.pid"
logfile "/usr/local/rediscluster/7001/redis.log"
daemonize yes #redis后台运行
dir "/usr/local/rediscluster/7001"
redis-server redis.conf
ps aux | grep redis-server
其他5个目录作法一样,唯一不同就是每个配置文件要写对应的号。(例如7002目录下的配置文件中相应的号就是7002)
6个目录做好以后查看端口信息:
redis-cli -p 7001
127.0.0.1:7001> info
# Cluster
cluster_enabled:1 #表示集群状态是激活的
4 搭建集群:
cd /root/redis-5.0.3
cd src
cp redis-trib.rb /usr/local/bin
redis-trib.rb #官网提供的命令
/usr/bin/env: ruby: No such file or directory
yum install ruby -y
redis-trib.rb
redis-cli --cluster help #根据提示创建集群
redis-cli --cluster create --cluster-replicas 1 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006 #创建集群
5 查看集群节点对应关系:
redis-cli --cluster info 127.0.0.1:7001 #查看集群信息
此时7001 7002 7003作为master,并且每个都有一个slave
测试集群
redis-cli -c -p 7001 ##随意访问一个端口
127.0.0.1:7001> set name hoho #自动跳转到7002上
-> Redirected to slot [5798] located at 127.0.0.1:7002
OK
127.0.0.1:7002> get name
"hoho"
宕掉一个master,会有它的slave来接替:
redis-cli -c -p 7005
127.0.0.1:7005> get name
-> Redirected to slot [5798] located at 127.0.0.1:7002 #自动跳转到7002上
"hoho"
127.0.0.1:7002> SHUTDOWN #宕掉7002
not connected>
== 此时查看集群信息==:
redis-cli --cluster info 127.0.0.1:7004
7006作为新的master来顶替7002
== 如果宕掉slave顶替的master,整个集群就不能用了:==
redis-cli -c -p 7001
127.0.0.1:7001> get name
-> Redirected to slot [5798] located at 127.0.0.1:7006 #自动跳转到7005上
"hoho"
127.0.0.1:7005> SHUTDOWN #宕掉7006
此时查看集群信息:
redis-cli --cluster info 127.0.0.1:7004
也读不到name信息了:
redis-cli -c -p 7001
127.0.0.1:7001> get name
(error) CLUSTERDOWN The cluster is down
恢复集群
重新加载7002和7006的配置文件:
cd /usr/local/rediscluster/
cd 7002
cat appendonly.aof #其中存储了之前的数据
redis-server redis.conf
ps aux | grep redis-server
7006做法相同
此时查看集群信息:
redis-cli --cluster info 127.0.0.1:7004
之前的信息也能读到了:
redis-cli -c -p 7001
127.0.0.1:7001> get name
-> Redirected to slot [5798] located at 127.0.0.1:7006
"hoho"
给集群中添加节点
1 创建两个新的节点:
cd /usr/local/rediscluster/
mkdir 7007
mkdir 7008
cd 7001
cp redis.conf ../7007
cp redis.conf ../7008
cd ..
cd 7007
vim redis.conf #其中的7001改为7007
redis-server redis.conf
ps aux | grep redis-server
7008做法相同
2 添加节点7007:(master的添加)
redis-cli --cluster add-node 127.0.0.1:7007 127.0.0.1:7001
redis-cli -c -p 7007 #查看到此时7007作为master,但没有slave,也没有分配的槽
3 添加节点7008:(slave的添加,master为7007)
redis-cli --cluster add-node 127.0.0.1:7008 127.0.0.1:7007 --cluster-slave --cluster-master-id 38052c1f68c392ae09482f7aea38acc4dadcd470
4 查看集群信息:
redis-cli --cluster info 127.0.0.1:7001 #查看到此时7007作为master,有slave,但没有分配的槽
5 均匀分配哈希槽:
redis-cli --cluster rebalance --cluster-threshold 1 --cluster-use-empty-masters 127.0.0.1:7001
6 查看集群信息:
redis-cli --cluster info 127.0.0.1:7001 #哈希槽分配均匀
7 读name信息时发现被存到了7007的哈希槽中:
redis-cli -c -p 7008
127.0.0.1:7008> get name
-> Redirected to slot [5798] located at 127.0.0.1:7007
"hoho"