说明
Redis-12-Redis集群 包含Redis集群的模式、插槽(slot)、集群其他常用命令、集群故障恢复 官方文档:https://redis.io/documentation Redis命令参考:http://redisdoc.com/
核心概念
》什么是Redis集群?
启动N个节点,将整个数据库平均分配到N个节点中,每个节点存储总数据的1/N
》集群的模式
》本案例搭建环境描述
本案例是搭建无中心化模式集群 本案例通过搭建6台Redis服务做测试,3主3从
》插槽(slot)
每一套Redis集群都会分配16384(0-16383)个插槽,N个主服务平均分配这16384个插槽 集群用公式CRC16(KEY)%16384
来计算每个key属于哪个插槽 每个key在集群中只会出现在一个主服务和该主服务的从服务中 有些命令在集群客户端中不好使
比如keys *
,你当前连接的哪个服务该命令只能查到当前服务下(插槽范围内)存放的key,但是可以通过get命令得到其他服务中的key的值,也可以通过set命令操作其他插槽。 比如批量操作mset k1 v1 k2 v2
,这种一次设置多个值的操作也不支持127.0.0.1:6386> mset k1 v1 k2 v2
(error) CROSSSLOT Keys in request don't hash to the same slot
建议不要使用批量操作命令一次设置多个值,多个值可以分多次插入。或者可以使用“组”的语法127.0.0.1:6386> mset k1{group1} v1 k2{group1} v2
-> Redirected to slot [7859] located at 192.168.3.241:6382
OK
# 切换服务,查看结果
127.0.0.1:6382> keys *
1) "k"
2) "k1{group1}"
3) "k2{group1}"
比如lua脚本不被支持
》集群其他常用命令
# 计算某个key属于哪个插槽
127.0.0.1:6381> cluster keyslot k
(integer) 7629
# 查看某个插槽中目前key的数量(注意:需要切换到该插槽所在服务下)
192.168.3.241:6382> cluster countkeysinslot 7629
(integer) 1
# 获取某个插槽中的所有(或部分)的key(注意:需要切换到该插槽所在服务下)
# ——语法:cluster getkeysinslot <插槽> <要获取的key的数量>
192.168.3.241:6382> cluster getkeysinslot 7629 10
1) "k"
》集群故障恢复
当某一台主服务宕机后,会自动将其从服务中的一台设置为主服务,当原先的主服务再次启动后就变成了一台从服务(反客为主) 关于如果某一组插槽的主从服务全部挂掉的处理方案,redis.conf配置中有一个参数:cluster-require-full-coverage yes
yes:整个集群都挂掉(默认值) no:集群正常运行,该组插槽无法使用
操作步骤
》准备环境,准备6个Redis服务实例
如果之前搭建了主从复制环境,先将该环境删除(停止服务、删除rdb文件,删除配置文件) 新建6个配置文件:redis6381.conf、redis6382.conf、redis6383.conf、redis6384.conf、redis6385.conf、redis6386.conf[root@192 redisSlave]# ll
total 88
drwxr-xr-x 2 root root 6 Jan 11 00:37 data
-rw-r--r-- 1 root root 204 Jan 11 01:03 redis6381.conf
-rw-r--r-- 1 root root 204 Jan 11 01:04 redis6382.conf
-rw-r--r-- 1 root root 204 Jan 11 01:04 redis6383.conf
-rw-r--r-- 1 root root 204 Jan 11 01:04 redis6384.conf
-rw-r--r-- 1 root root 204 Jan 11 01:04 redis6385.conf
-rw-r--r-- 1 root root 204 Jan 11 01:04 redis6386.conf
-rw-r--r-- 1 root root 61813 Jan 9 17:21 redis.conf
配置文件中都增加集群相关配置(以6381为例)[root@192 redisSlave]# cat redis6381.conf
include ./redis.conf
port 6381
bind 0.0.0.0
pidfile /var/run/redis6381.pid
dbfilename dump6381.rdb
dir ./data
# 集群相关配置
cluster-enabled yes
cluster-config-file node6381.conf
cluster-node-timeout 5000
# 主服务密码
masterauth 123456
requirepass 123456
其他5个配置文件内容与这个相仿,把端口号6381全部改为相应的端口号即可 提示:vim批量替换语法::%s/6381/6382
(将6381全部替换为6382) 启动6个服务节点(其中6379为默认Redis,不受此案例影响,不用理会)[root@192 redisSlave]# ps -ef |grep redis
root 1845 1 0 Jan07 ? 00:07:00 /usr/local/redis/bin/redis-server *:6379
root 92358 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6381 [cluster]
root 92367 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6382 [cluster]
root 92374 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6383 [cluster]
root 92382 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6384 [cluster]
root 92389 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6385 [cluster]
root 92396 1 0 01:19 ? 00:00:00 /usr/local/redis/bin/redis-server *:6386 [cluster]
root 92422 1803 0 01:19 pts/0 00:00:00 grep --color=auto redis
》将6个节点合成一个集群(3主3从)
使用Redis客户端工具(redis-cli)创建集群[root@192 redisSlave]# /usr/local/redis/bin/redis-cli \
--cluster create --cluster-replicas 1 -a 123456 \
192.168.3.241:6381 192.168.3.241:6382 192.168.3.241:6383 \
192.168.3.241:6384 192.168.3.241:6385 192.168.3.241:6386
# 输入以上命令回车会有自动创建集群关系,确认无误后输入yes回车
# 最终成功后结果:
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
参数说明
--cluster create
:创建集群--cluster-replicas 1
:从服务个数,1也就是主从1对1-a 123456
:创建集群时,Redis密码,Redis没密码时去掉该项 注意:新版Redis的客户端工具支持该参数,老版本的不支持需要你手动安装Ruby环境,本案例微测试。
具体查看你的Redis支不支持,使用:redis-cli --help
命令查看,如果有--cluster <command> [args...] [opts...]
选项,说明你的Redis客户端支持集群的创建 注意:此处创建请使用真实IP,不要使用127.0.0.1 连接Redis集群[root@192 redisSlave]# /usr/local/redis/bin/redis-cli -a 123456 -c -p 6382
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
127.0.0.1:6382>
连接Redis时加入参数-c
即可实现连接集群 Redis有密码的话需要加入参数-a password
操作Redis集群,连接任意一台集群中的Redis服务都可以, 查看集群信息(命令:cluster info)cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:5695
cluster_stats_messages_pong_sent:5628
cluster_stats_messages_sent:11323
cluster_stats_messages_ping_received:5623
cluster_stats_messages_pong_received:5695
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:11323
查看集群节点(命令:cluster nodes)127.0.0.1:6381> cluster nodes
fa23cc866eb3bf7b641c7a8d75af528f2a3d27f0 192.168.3.241:6382@16382 master - 0 1641838860000 2 connected 5461-10922
6e5144151286da515acdc22a7352e2ba9aa46deb 192.168.3.241:6385@16385 slave 70e02ce67dc053ebf5d4c5e239d2ad3529ce5bf9 0 1641838861525 5 connected
140714063f2beebf105a6f4b818a3150f9d81014 192.168.3.241:6386@16386 slave fa23cc866eb3bf7b641c7a8d75af528f2a3d27f0 0 1641838859506 6 connected
70e02ce67dc053ebf5d4c5e239d2ad3529ce5bf9 192.168.3.241:6381@16381 myself,master - 0 1641838858000 1 connected 0-5460
efd1cec03b506d01ca1ab4337b322f368a68bb94 192.168.3.241:6384@16384 slave f40e10dcbc0852662d0f58362950a1c8d3e7d2bd 0 1641838860513 4 connected
f40e10dcbc0852662d0f58362950a1c8d3e7d2bd 192.168.3.241:6383@16383 master - 0 1641838860000 3 connected 10923-16383
127.0.0.1:6381>