Docker初识：Redis Cluster水平伸缩

最新推荐文章于 2023-06-01 23:25:44 发布
最新推荐文章于 2023-06-01 23:25:44 发布
阅读量341 收藏 2
点赞数
分类专栏： # Redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wngpenghao/article/details/117985745
版权

版本说明：

系统：centos 7

docker：18

redis：6.0.3

一、水平扩容

参考上面博客Docker初识：Redis服务的搭建（集群），创建三主三从的redis集群，现在新增一主一从两个节点，在原集群的6个节点的基础上新增2个节点，由原来的3主3从变成4主4从。

其服务器如下：

IPPORT主从说明
172.17.0.67001master
172.17.0.67002master
172.17.0.67003master
172.17.0.67004slave
172.17.0.67005salve
172.17.0.67006slave
扩容IP扩容Port 
172.17.0.67007master
172.17.0.67008slave

其部署结构如下：

1、编辑配置文件并启动7007、7008两个节点。

首先构建相关目录以及配置文件。

redis-cluster.tmpl

# redis端口
port ${PORT}
# 关闭保护模式
protected-mode no
#监听
bind 0.0.0.0
# 开启集群
cluster-enabled yes
# 集群节点配置
cluster-config-file nodes.conf
# 超时
cluster-node-timeout 5000
# 集群节点IP host模式为宿主机IP
cluster-announce-ip 172.17.0.6
# 集群节点端口 7001 - 7006
cluster-announce-port ${PORT}
cluster-announce-bus-port 1${PORT}
# RDB
# #表示900 秒内如果至少有 1 个 key 的值变化，则保存
save 900 1
# #表示300 秒内如果至少有 10 个 key 的值变化，则保存
save 300 10
# #表示60 秒内如果至少有 10000 个 key 的值变化，则保存
save 60 10000
#AOF
# 开启 appendonly 备份模式
appendonly yes
# 每秒钟备份
appendfsync everysec
# 对aof文件进行压缩时，是否执行同步操作
no-appendfsync-on-rewrite no
# 当目前aof文件大小超过上一次重写时的aof文件大小的100%时会再次进行重写
auto-aof-rewrite-percentage 100
# 重写前AOF文件的大小最小值 默认 64mb
auto-aof-rewrite-min-size 64mb
# 此处绑定ip 可以是阿里内网ip 和 本地ip 也可以直接注释掉该项
#bind 172.17.0.6
#设置redis密码 各个节点请保持密码一致
requirepass 123456
masterauth 123456

执行文件：build.sh

for port in `seq 7007 7008`; do \
  mkdir -p ./redis-cluster/${port}/conf \
  && PORT=${port} envsubst < ./redis-cluster.tmpl > ./redis-cluster/${port}/conf/redis.conf \
  && mkdir -p ./redis-cluster/${port}/data; \
done

docker-compose-redis-cluster-dilatancy.yml

version: '3.3'
services:
  redis7001:
    image: 'redis'
    container_name: redis7007-dilatancy
    command:
      ["redis-server", "/usr/local/etc/redis/redis.conf"]
    volumes:
      - ./redis-cluster/7007/conf/redis.conf:/usr/local/etc/redis/redis.conf
      - ./redis-cluster/7007/data:/data
    ports:
      - "7007:7007"
      - "17007:17007"
    environment:
      - TZ=Asia/Shanghai
  redis7002:
    image: 'redis'
    container_name: redis7008-dilatancy
    command:
      ["redis-server", "/usr/local/etc/redis/redis.conf"]
    volumes:
      - ./redis-cluster/7008/conf/redis.conf:/usr/local/etc/redis/redis.conf
      - ./redis-cluster/7008/data:/data
    ports:
      - "7008:7008"
      - "17008:17008"
    environment:
      - TZ=Asia/Shanghai

up.sh

docker-compose -f docker-compose-redis-cluster-dilatancy.yml up -d

down.sh

docker-compose -f docker-compose-redis-cluster-dilatancy.yml down

生成如下结构目录：

[root@VM_0_6_centos cluster3]# tree
.
|-- build.sh
|-- docker-compose-redis-cluster-dilatancy.yml
|-- down.sh
|-- redis-cluster
|   |-- 7007
|   |   |-- conf
|   |   |   `-- redis.conf
|   |   `-- data
|   `-- 7008
|       |-- conf
|       |   `-- redis.conf
|       `-- data
|-- redis-cluster.tmpl
`-- up.sh

7 directories, 14 files

启动7007与7008。

[root@VM_0_6_centos cluster3]# docker ps
CONTAINER ID        IMAGE                 COMMAND                  CREATED             STATUS              PORTS                                                                                                                     NAMES
4dea99dd3397        redis                 "docker-entrypoint.s…"   20 hours ago        Up 20 hours         0.0.0.0:7007->7007/tcp, 6379/tcp, 0.0.0.0:17007->17007/tcp                                                                redis7007-dilatancy
6cd3a0244d70        redis                 "docker-entrypoint.s…"   20 hours ago        Up 20 hours         0.0.0.0:7008->7008/tcp, 6379/tcp, 0.0.0.0:17008->17008/tcp                                                                redis7008-dilatancy
57be8ef8c5a9        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7002->7002/tcp, 6379/tcp, 0.0.0.0:17002->17002/tcp                                                                redis7002
c6e09abc1399        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7006->7006/tcp, 6379/tcp, 0.0.0.0:17006->17006/tcp                                                                redis7006
bbfa9dae9a36        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7004->7004/tcp, 6379/tcp, 0.0.0.0:17004->17004/tcp                                                                redis7004
2cb4107f3849        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7005->7005/tcp, 6379/tcp, 0.0.0.0:17005->17005/tcp                                                                redis7005
35b71161ad74        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7001->7001/tcp, 6379/tcp, 0.0.0.0:17001->17001/tcp                                                                redis7001
a2152178bb37        redis                 "docker-entrypoint.s…"   22 hours ago        Up 22 hours         0.0.0.0:7003->7003/tcp, 6379/tcp, 0.0.0.0:17003->17003/tcp                                                                redis7003

进入7001查看集群信息，可以发现7007与7008还没有加入集群。

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623911251795 7 connected 0-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623911250000 3 connected 10923-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623911248000 2 connected 5461-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623911250792 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623911250593 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623911250000 4 connected
127.0.0.1:7002>

注意：以上集群因进行过容错测试，所以导致主从节点信息与上述描述略微差异，因重新选举导致，不影响水平扩容结果。

2、新增master节点7007

进入7002，使用 add-node 命令新增一个主节点7007(master)，看到日志最后有"[OK] New node added correctly"提示代表新节点加入成功。

redis-cli --cluster add-node 172.17.0.6:7007 172.17.0.6:7002 -a 123456

第一个IP端口表示新的master节点，第二个ip端口代表原先集群master节点。

[root@VM_0_6_centos cluster3]# docker exec --it redis7002 /bin/bash
unknown flag: --it
See 'docker exec --help'.
[root@VM_0_6_centos cluster3]# docker exec -it redis7002 /bin/bash
root@57be8ef8c5a9:/data# redis-cli --cluster add-node 172.17.0.6:7007 172.17.0.6:7002 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Adding node 172.17.0.6:7007 to cluster 172.17.0.6:7002
>>> Performing Cluster Check (using node 172.17.0.6:7002)
M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001
   slots: (0 slots) slave
   replicates 2db63b6ea82c538005d5cdb7e77cc13c15418066
S: d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005
   slots: (0 slots) slave
   replicates bbef93cba563619e2939d51cf7efe47f582eb103
S: 02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004
   slots: (0 slots) slave
   replicates bbb8871b895d55d9db7d4b7960abce8f3710d307
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 172.17.0.6:7007 to make it join the cluster.
[OK] New node added correctly.

添加成功后，再去查看集群状态

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623912971000 7 connected 0-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623912971586 3 connected 10923-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623912969000 2 connected 5461-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623912971687 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623912971000 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623912970000 4 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623912971586 0 connected

节点7007新增成功，但是新增的节点不会有任何数据，因为它还没有分配任何的slot(hash槽)，我们需要为新节点手工分配hash槽。

使用redis-cli命令为9007分配hash槽，找到集群中的任意一个主节点，对其进行重新分片工作。

执行reshard命令对集群进行重新分片，其中172.17.0.6:7002 为任意一个主节点的IP。

redis-cli -a 123456 --cluster reshard 172.17.0.6:7002
root@57be8ef8c5a9:/data# redis-cli --cluster add-node 172.17.0.6:7007 172.17.0.6:7002 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Adding node 172.17.0.6:7007 to cluster 172.17.0.6:7002
>>> Performing Cluster Check (using node 172.17.0.6:7002)
M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001
   slots: (0 slots) slave
   replicates 2db63b6ea82c538005d5cdb7e77cc13c15418066
S: d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005
   slots: (0 slots) slave
   replicates bbef93cba563619e2939d51cf7efe47f582eb103
S: 02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004
   slots: (0 slots) slave
   replicates bbb8871b895d55d9db7d4b7960abce8f3710d307
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 172.17.0.6:7007 to make it join the cluster.
[OK] New node added correctly.
root@57be8ef8c5a9:/data# redis-cli -a 123456 --cluster reshard 172.17.0.6:7002
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Performing Cluster Check (using node 172.17.0.6:7002)
M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001
   slots: (0 slots) slave
   replicates 2db63b6ea82c538005d5cdb7e77cc13c15418066
S: d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005
   slots: (0 slots) slave
   replicates bbef93cba563619e2939d51cf7efe47f582eb103
S: 02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004
   slots: (0 slots) slave
   replicates bbb8871b895d55d9db7d4b7960abce8f3710d307
M: 64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007
   slots: (0 slots) master
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
How many slots do you want to move (from 1 to 16384)? 4096
What is the receiving node ID? 64172884ed36bc655accacd0ca94439db09efc92
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1: all
Ready to move 4096 slots.
  Source nodes:
    M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
       slots:[5461-10922] (5462 slots) master
       1 additional replica(s)
    M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
       slots:[0-5460] (5461 slots) master
       1 additional replica(s)
    M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
       slots:[10923-16383] (5461 slots) master
       1 additional replica(s)
  Destination node:
    M: 64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007
       slots: (0 slots) master
  Resharding plan:
    Moving slot 5461 from bbb8871b895d55d9db7d4b7960abce8f3710d307
    Moving slot 5462 from bbb8871b895d55d9db7d4b7960abce8f3710d307
    Moving slot 5463 from bbb8871b895d55d9db7d4b7960abce8f3710d307
    Moving slot 5464 from bbb8871b895d55d9db7d4b7960abce8f3710d307
    Moving slot 5465 from bbb8871b895d55d9db7d4b7960abce8f3710d307
	......
	下面是迁移和分片过程

在执行过程中可以发现，需要手动输入分配节点地址，分配多少hash槽等。其中部分需要输入参数：

#需要多少个槽移动到新的节点上，自定义，比如4069个hash槽
How many slots do you want to move (from 1 to 16384)? 4096

#把这4096个hash槽移动到哪个节点上去，需要指定节点id，这里为7007节点的id，ID可以从增加节点输出日志中查看)
What is the receiving node ID? 64172884ed36bc655accacd0ca94439db09efc92

#输入all为从所有主节点中分别抽取相应的槽数指定到新节点中，抽取的总槽数为4096个
#输入done，意思将输入的节点ID，抽取的总槽数为4096个
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1: all

 ... ...
#输入yes确认开始执行分片任务
Do you want to proceed with the proposed reshard plan (yes/no)?yes

执行完成后，可以查看集群状态。

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623921699448 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623921698547 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623921698000 2 connected 6827-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623921698446 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623921699549 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623921699549 4 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623921699000 8 connected 0-1364 5461-6826 10923-12287

如上所示，可以发现7007已经分配hash槽成功，说明7007已经成功加入集群，并且是master。

2、为7007添加从节点7008。

首先把7008节点加入集群，并查看集群状态。

root@57be8ef8c5a9:/data# redis-cli --cluster add-node 172.17.0.6:7008 172.17.0.6:7002 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Adding node 172.17.0.6:7008 to cluster 172.17.0.6:7002
>>> Performing Cluster Check (using node 172.17.0.6:7002)
M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
   slots:[6827-10922] (4096 slots) master
   1 additional replica(s)
M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
   slots:[1365-5460] (4096 slots) master
   1 additional replica(s)
M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
   slots:[12288-16383] (4096 slots) master
   1 additional replica(s)
S: 2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001
   slots: (0 slots) slave
   replicates 2db63b6ea82c538005d5cdb7e77cc13c15418066
S: d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005
   slots: (0 slots) slave
   replicates bbef93cba563619e2939d51cf7efe47f582eb103
S: 02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004
   slots: (0 slots) slave
   replicates bbb8871b895d55d9db7d4b7960abce8f3710d307
M: 64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007
   slots:[0-1364],[5461-6826],[10923-12287] (4096 slots) master
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 172.17.0.6:7008 to make it join the cluster.
[OK] New node added correctly.
root@57be8ef8c5a9:/data#
127.0.0.1:7002> cluster nodes
0c3f76bba92c7121b95ba35dab5cf4c383443096 172.17.0.6:7008@17008 master - 0 1623922864552 0 connected
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623922864000 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623922863000 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623922864000 2 connected 6827-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623922863000 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623922864552 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623922864952 4 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623922864552 8 connected 0-1364 5461-6826 10923-12287

其次，进入新节点7008中，配置7008为7007从节点。

cluster replicate 主节点ID
[root@VM_0_6_centos ~]# docker exec -it redis7008-dilatancy /bin/bash
root@6cd3a0244d70:/data# redis-cli -p 7008 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
127.0.0.1:7008> cluster replicate 64172884ed36bc655accacd0ca94439db09efc92
OK
127.0.0.1:7008>

查看集群状态。

127.0.0.1:7002> cluster nodes
0c3f76bba92c7121b95ba35dab5cf4c383443096 172.17.0.6:7008@17008 slave 64172884ed36bc655accacd0ca94439db09efc92 0 1623923282512 8 connected
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623923282512 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623923282913 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623923281000 2 connected 6827-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623923281000 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623923282000 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623923282512 4 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623923282512 8 connected 0-1364 5461-6826 10923-12287

原先的7008已经变成7007的从节点。

最后，检查，各节点槽的均衡性。

root@6cd3a0244d70:/data# redis-cli -a 123456 --cluster rebalance 172.17.0.6:7002
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Performing Cluster Check (using node 172.17.0.6:7002)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
*** No rebalancing needed! All nodes are within the 2.00% threshold.

结论：No rebalancing needed! All nodes are within the 2.00% threshold.

二、集群的缩容

将新增的主从节点7007与7008从现有的集群中卸载掉。

在尝试删除之前加入的主节点7007之前，先删除7007的从节点7008，之后，再移除7007这个主节点。这个步骤相对比较麻烦一些，因为主节点的里面是有分配了hash槽的，所以我们这里必须先把7007里的hash槽放入到其他的可用主节点中去，然后再进行移除节点操作，不然会出现数据丢失问题(目前只能把master的数据迁移到一个节点上，暂时做不了平均分配功能)。

首先，进入从节点7008，执行del-node删除从节点。

[root@VM_0_6_centos ~]# docker exec -it redis7008-dilatancy /bin/bash
root@6cd3a0244d70:/data#
root@6cd3a0244d70:/data# redis-cli --cluster del-node 172.17.0.6:7008 0c3f76bba92c7121b95ba35dab5cf4c383443096 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Removing node 0c3f76bba92c7121b95ba35dab5cf4c383443096 from cluster 172.17.0.6:7008
>>> Sending CLUSTER FORGET messages to the cluster...
>>> Sending CLUSTER RESET SOFT to the deleted node.
root@6cd3a0244d70:/data#

删除成功，查看集群状态信息。

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623995452000 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623995453580 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623995452000 2 connected 6827-10922
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623995453080 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623995453000 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623995452579 4 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623995452076 8 connected 0-1364 5461-6826 10923-12287
127.0.0.1:7002>

迁移待删除节点7007的hash槽，操作和扩容抽取hash槽操作一直，只不过Source node 2:done。

进入7007节点，执行reshard。

[root@VM_0_6_centos ~]# docker exec -it redis7007-dilatancy /bin/bash
root@4dea99dd3397:/data# redis-cli -a 123456 --cluster reshard 172.17.0.6:7007
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Performing Cluster Check (using node 172.17.0.6:7007)
M: 64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007
   slots:[0-1364],[5461-6826],[10923-12287] (4096 slots) master
S: d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005
   slots: (0 slots) slave
   replicates bbef93cba563619e2939d51cf7efe47f582eb103
M: bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003
   slots:[12288-16383] (4096 slots) master
   1 additional replica(s)
S: 02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004
   slots: (0 slots) slave
   replicates bbb8871b895d55d9db7d4b7960abce8f3710d307
M: 2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006
   slots:[1365-5460] (4096 slots) master
   1 additional replica(s)
S: 2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001
   slots: (0 slots) slave
   replicates 2db63b6ea82c538005d5cdb7e77cc13c15418066
M: bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002
   slots:[6827-10922] (4096 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
#这里是需要把数据移动到哪？迁移到172.17.0.6:7002
How many slots do you want to move (from 1 to 16384)? 4096
What is the receiving node ID? bbb8871b895d55d9db7d4b7960abce8f3710d307
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
#这里是需要数据源，也就是待迁移的节点：172.17.0.6:7007)
Source node #1: 64172884ed36bc655accacd0ca94439db09efc92
#这里直接输入done 开始生成迁移计划
Source node #2: done
	... ... 开始迁移

至此，我们已经成功的把7007主节点的数据迁移到7002上去了，我们可以看一下现在的集群状态如下图，你会发现7007下面已经没有任何hash槽了，证明迁移成功！

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623996216089 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623996217000 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623996216000 9 connected 0-1364 5461-12287
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623996217000 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623996217590 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623996217389 9 connected
64172884ed36bc655accacd0ca94439db09efc92 172.17.0.6:7007@17007 master - 0 1623996216389 8 connected

进入7007删除7007节点。

[root@VM_0_6_centos ~]# docker exec -it redis7007-dilatancy /bin/bash
root@4dea99dd3397:/data# redis-cli --cluster del-node 172.17.0.6:7007 64172884ed36bc655accacd0ca94439db09efc92 -a 123456
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Removing node 64172884ed36bc655accacd0ca94439db09efc92 from cluster 172.17.0.6:7007
>>> Sending CLUSTER FORGET messages to the cluster...
>>> Sending CLUSTER RESET SOFT to the deleted node.

查看集群信息

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623996409820 7 connected 1365-5460
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623996408016 3 connected 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623996409000 9 connected 0-1364 5461-12287
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623996408000 7 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623996408516 5 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623996408817 9 connected

7007与7008节点删除成功。但是，可以发现7001~7006的hash槽分配额不均匀，可以在任意主节点上，执行rebalance操作进行槽位的负载均衡！

[root@VM_0_6_centos ~]# docker exec -it redis7002 /bin/bash
root@57be8ef8c5a9:/data# redis-cli --cluster rebalance 172.17.0.6:7002
[ERR] Node 172.17.0.6:7002 NOAUTH Authentication required.
root@57be8ef8c5a9:/data# redis-cli -a 123456 --cluster rebalance 172.17.0.6:7002
Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
>>> Performing Cluster Check (using node 172.17.0.6:7002)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Rebalancing across 3 nodes. Total weight = 3.00
Moving 1366 slots from 172.17.0.6:7002 to 172.17.0.6:7006
######################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################
Moving 1365 slots from 172.17.0.6:7002 to 172.17.0.6:7003
#####################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################
root@57be8ef8c5a9:/data#

查看集群状态信息。

127.0.0.1:7002> cluster nodes
2db63b6ea82c538005d5cdb7e77cc13c15418066 172.17.0.6:7006@17006 master - 0 1623996635348 10 connected 0-5461
bbef93cba563619e2939d51cf7efe47f582eb103 172.17.0.6:7003@17003 master - 0 1623996636551 11 connected 5462-6826 12288-16383
bbb8871b895d55d9db7d4b7960abce8f3710d307 172.17.0.6:7002@17002 myself,master - 0 1623996634000 9 connected 6827-12287
2a57d563dfb9d1f3091fb09f1d3393f706ec7f81 172.17.0.6:7001@17001 slave 2db63b6ea82c538005d5cdb7e77cc13c15418066 0 1623996636350 10 connected
d9724cee129f31240cdd1c1e1f9bbd4c6314d441 172.17.0.6:7005@17005 slave bbef93cba563619e2939d51cf7efe47f582eb103 0 1623996635046 11 connected
02ded0630fe3d3b365e36b4b4cf14e1fa75611e8 172.17.0.6:7004@17004 slave bbb8871b895d55d9db7d4b7960abce8f3710d307 0 1623996636000 9 connected

至此，完成。

滴水可藏海
关注
专栏目录
2.还不会部署高可用的kubernetes集群?看我手把手教你使用二进制部署v1.23.6的K8S集群实践(下)...
WeiyiGeek 唯一极客IT知识分享
05-09 463
公众号关注「WeiyiGeek」设为「特别关注」，每天带你玩转网络安全运维、应用开发、物联网IOT学习！本章目录：6.Kubernetes 集群安装部署1) 二进制软件包下载安装 （手动-此处以该实践为例）2) 二进制部署配置 kube-apiserver3) 二进制部署配置 kubectl4) 二进制部署配置 kube-controller-manager5) 二进制部...
深入学习 Redis Cluster - 基于 Docker、DockerCompose 搭建 Redis 集群，处理故障、扩容方案
最新发布
CYK_byte的博客
09-17 1826
当前阶段，由于我只有一个 云服务器，搞分布式系统就比较麻烦，而实际工作中，一般是通过多个主机的方式来搭建集群的. 因此这里我会 基于 docker、docker-compose（容器编排） 来搭建 redis 集群.
docker 挂载命令
编码爱好者
02-06 1163
docker run -d -v /I/mysql/data/:/var/lib/mysql -p 3306:3306 --name docker-mysql-server -e MYSQL_ROOT_PASSWORD=123456 mysql docker run -d -v /I/redis/data/master:/data -p 6379:6379 --name docker-redis-...
APK 反编译过程中的几个错误解决方法
GQB1226的专栏
06-21 2446
今天在反编译研究个apk的时候在回编译的时候提示
Docker 下安装 Redis 启动并设置密码、开启持久化
西蒙老爷的博客
12-18 6130
拉取镜像 docker pull redis:5.0 启动并设置密码、开启持久化 docker run -d --name redis-server -p 6379:6379 redis:5.0 --requirepass &quot;mypassword&quot; ----appendonly yes
Docker网络
runner668的博客
07-07 743
一：如何让一个容器连接两个网络？如果是使用 docker run，那很不幸，一次只可以连接一个网络，因为 docker run 的 --network 参数只可以出现一次（如果出现多次，最后的会覆盖之前的）。不过容器运行后，可以用命令 docker network connect 连接多个网络。假设我们创建了两个网络：$ docker network create mynet1 $ docker ...
bitnami-docker-redis-cluster
03-21
$ docker run --name redis-cluster -e ALLOW_EMPTY_PASSWORD=yes bitnami/redis-cluster:latest Docker撰写 $ curl -sSL https://raw.githubusercontent.com/bitnami/bitnami-docker-redis-cluster/mast
docker-redis:Redis Docker映像
03-21
Docker Redis的 我已经使用的Redis图像已有一段时间了，但是我想使用最新版本的 ，并且对该图像有更多的控制权。 目前还没有卷或环境变量-尽管将来可能会添加一些。健康检查会自动运行以检查Redis是否健康。 港口 ...
Docker搭建Redis的cluster集群
冲出仁川，走出马德里，故事还会再继续
09-21 1232
文章目录1、简介2、哈希槽与cluster集群3、初步搭建cluster集群3.1 配置cluster集群的三个主节点3.2 配置三个从节点3.3 为各个节点创建容器3.4 使用docker inspect redisClusterMaster1等命令查看各个节点IP和端口3.5 连接各个节点3.6 分配哈希槽3.7 从节点设置3.8 主从关系设置 1、简介 相比于哨兵集群，cluster集群能支持扩容，且无须额外的节点来监控状态，所以使用这种模式集群的系统会用得更多些。 2、哈希槽与cluster集群 在
Mac中使用Docker搭建Redis Cluster集群
sdujava2011
06-01 977
是真的脑抽才会用Docker搭redis集群，homebrew安装的redis配多个配置文件应该也可以直接搭建，时间全花在搞Docker上了，后续有时间了搞一下另一种搭建方式再写一篇博客。真心建议不要用MacOS搭服务，很痛苦，有时候觉得还不如Windows。开发的话还可以。
SpringBoot进阶（五）Docker在Linux上的安装和使用
白玉梁的专栏
10-24 983
Docker教程：https://www.runoob.com/docker/centos-docker-install.html 使用Docker，你将不需要再对mysql，redis，rabbitmq等的安装进行相关配置，随装随用，方便快捷！ Linux安装Docker： curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun 或 curl -sSL https://get.daocloud.io/docker | sh 如果
redis-基于docker搭建redis集群
weixin_42128977的博客
11-02 943
学习了redis的主从，哨兵之后，学习redis高可用的最后一篇集群。学习集群不着急，先来看看怎么搭建集群。现在都讲究容器化部署，咱也来试试基于docker搭建redis集群。ps:我只有一台虚拟机，所以。。。。。将就一下。
Docker以配置文件的方式启动Redis容器失败
yuan_boss的博客
01-07 1535
Docker启动Redis容器失败，甚至容器创建成功，也不会报错，但是没有成功运行，这就需要借用的思路来解决了
Docker命令备忘
北落南山
10-25 1032
查看本机所安装的镜像 docker images 根据名称启动docker容器hello-world docker run hello-world 启动容器 docker start 容器id 关闭容器 docker stop 容器id 删除容器 docker rm 容器id 查看docker中正在运行的容器 docker ps 查看docker中所有容器 docker ps -a 删除镜像 do...
unknown flag: --from-file
attackers的博客
12-19 4164
问题： unknown flag: --from-file
redis集群搭建及遇到的问题
霓虹深处
06-09 4696
首先看之前笔记安装redis（可以不安装，去redis的github上copy源码编译）。 Redis群集配置参数 我们即将创建一个示例集群部署。在继续之前，让我们介绍Redis Cluster在redis.conf文件中引入的配置参数。有些人会很明显，有些人会在你继续阅读时更清楚。 cluster-enabled<yes/no>：如果是，则在特定Redis实例中启用Redis群...
Redis(设计与实现):49---集群之集群节点、节点启动（CLUSTER MEET/NODE命令、cluster-enabled选项）
董哥的黑板报
12-02 1060
一、集群介绍 Redis集群是Redis提供的分布式数据库方案，集群通过分片（sharding）来进行数据共享，并提供复制和故障转移功能 二、集群节点介绍 一个Redis集群通常由多个节点（node）组成，在刚开始的时候，每个节点都是相互独立的，它们都处于一个只包含自己的集群当中，要组建一个真正可工作的集群，我们必须将各个独立的节点连接起来，构成一个包含多个节点的集群 节点的连接（CLUST...
redis cluster管理工具redis-trib.rb详解
热门推荐
胡杰的专栏
03-24 6万+
redis cluster管理工具redis-trib.rb详解 redis-trib.rb 命令 command 详解
docker集成redis cluster集群
06-02
要在Docker中集成Redis Cluster集群，可以按照以下步骤操作： 1. 创建一个Docker Compose文件，定义Redis Cluster集群的服务和配置。例如： ``` version: '3' services: redis-1: image: redis:latest command...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值