docker部署redis集群+集群扩缩容

已于 2022-11-05 03:08:12 修改
阅读量407 收藏 1
点赞数
分类专栏： docker 文章标签： redis docker
于 2022-11-05 01:57:59 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_50255609/article/details/127417990
版权

1、集群规划(3主3从)：

nameipport
redis-node-1192.168.150.1106381
redis-node-2192.168.150.1106382
redis-node-3192.168.150.1106383
redis-node-4192.168.150.1106384
redis-node-5192.168.150.1106385
redis-node-6192.168.150.1106386

2、安装docker：

5、1 安装需要的软件包

$ yum install -y yum-utils

5、2 设置stable镜像仓库：

$ yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

5、3 生成缓存：

$ yum makecache

 5、4   安装DOCKER CE：

$ yum install docker-ce docker-ce-cli containerd.io docker-compose-plugin

 5、5 配置阿里云镜像加速：

$ mkdir -p /etc/docker
$ tee /etc/docker/daemon.json <<-'EOF'
{
   "registry-mirrors": ["https://fxt824bw.mirror.aliyuncs.com"]
}
EOF

5、6 验证docker是否安装：

$ docker -v
Docker version 20.10.18, build b40c2f6

5、7 启动docker：

$ systemctl start docker

3、拉取redis镜像：

$ docker pull redis:6.0.8

4、运行redis容器实例：

docker run -d --name redis-node-1 --net host --privileged=true -v /redis/share/redis-node-1:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6381 
docker run -d --name redis-node-2 --net host --privileged=true -v /redis/share/redis-node-2:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6382 
docker run -d --name redis-node-3 --net host --privileged=true -v /redis/share/redis-node-3:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6383 
docker run -d --name redis-node-4 --net host --privileged=true -v /redis/share/redis-node-4:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6384 
docker run -d --name redis-node-5 --net host --privileged=true -v /redis/share/redis-node-5:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6385 
docker run -d --name redis-node-6 --net host --privileged=true -v /redis/share/redis-node-6:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6386

查看六个redis容器实例是否运行

$ docker ps
CONTAINER ID   IMAGE                    COMMAND                  CREATED         STATUS          PORTS                                                                                        NAMES
1aa258d0a1ab   redis:6.0.8              "docker-entrypoint.s…"   5 minutes ago   Up 5 minutes                                                                                                     redis-node-6
b6b0d8674fba   redis:6.0.8              "docker-entrypoint.s…"   5 minutes ago   Up 5 minutes                                                                                                     redis-node-5
f84b41abdda8   redis:6.0.8              "docker-entrypoint.s…"   5 minutes ago   Up 5 minutes                                                                                                     redis-node-4
69585693a06a   redis:6.0.8              "docker-entrypoint.s…"   5 minutes ago   Up 5 minutes                                                                                                     redis-node-3
7ae9867a244f   redis:6.0.8              "docker-entrypoint.s…"   5 minutes ago   Up 5 minutes                                                                                                     redis-node-2
b3192a6c160b   redis:6.0.8              "docker-entrypoint.s…"   6 minutes ago   Up 6 minutes

 可以看到容器实例已经运行。

5、部署redis集群

5、1 进入容器内部

docker exec -it redis-node-1 /bin/bash

 5、2 构建主从关系

$ redis-cli --cluster create 192.168.150.110:6381 192.168.150.110:6382 192.168.150.110:6383 192.168.150.110:6384 192.168.150.110:6385 192.168.150.110:6386 --cluster-replicas 1

# 参数说明：
--cluster-replicas 1： 为每个master创建一个slave节点

 5、3 查看节点状态

root@gr:/data# redis-cli -p 6381
127.0.0.1:6381>
127.0.0.1:6381>
127.0.0.1:6381> cluster nodes
1f46effff69e974a1586b67082570e70961b9abe 192.168.150.110:6385@16385 slave 8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d 0 1667581564000 2 connected
aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51 192.168.150.110:6383@16383 master - 0 1667581559000 3 connected 10923-16383
2dee6046534340e3f7db45e32fe02cf94b7b4e32 192.168.150.110:6386@16386 slave aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51 0 1667581562000 3 connected
4d4404303675e0fb887a73dccd0ae9e5f10edaf5 192.168.150.110:6384@16384 slave 8b12adc7fff6e626fddbfe46b69b0a04051148c8 0 1667581563442 1 connected
8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d 192.168.150.110:6382@16382 master - 0 1667581564446 2 connected 5461-10922
8b12adc7fff6e626fddbfe46b69b0a04051148c8 192.168.150.110:6381@16381 myself,master - 0 1667581563000 1 connected 0-5460



127.0.0.1:6381> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:172
cluster_stats_messages_pong_sent:172
cluster_stats_messages_sent:344
cluster_stats_messages_ping_received:167
cluster_stats_messages_pong_received:172
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:344

5、4 测试数据的写入和读取

# 测试写入
root@gr:/data# redis-cli -p 6381 -c
127.0.0.1:6381>
127.0.0.1:6381>
127.0.0.1:6381> set k1 v1
-> Redirected to slot [12706] located at 192.168.150.110:6383
OK
192.168.150.110:6383> set k2 v2
-> Redirected to slot [449] located at 192.168.150.110:6381
OK



# 测试读取
192.168.150.110:6381> get k1
-> Redirected to slot [12706] located at 192.168.150.110:6383
"v1"
192.168.150.110:6383> get k2
-> Redirected to slot [449] located at 192.168.150.110:6381
"v2"

可以看到数据可以正常写入和读取。

5、5 测试集群的容错迁移

# 停掉主机redis-node-1
docker stop redis-node-1

 再次查看集群信息

$ docker exec -it redis-node-2 bash
root@gr:/data# redis-cli -p 6382 -c
127.0.0.1:6382>
127.0.0.1:6382>
127.0.0.1:6382> cluster nodes
aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51 192.168.150.110:6383@16383 master - 0 1667582456000 3 connected 10923-16383
2dee6046534340e3f7db45e32fe02cf94b7b4e32 192.168.150.110:6386@16386 slave aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51 0 1667582457414 3 connected
8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d 192.168.150.110:6382@16382 myself,master - 0 1667582456000 2 connected 5461-10922
4d4404303675e0fb887a73dccd0ae9e5f10edaf5 192.168.150.110:6384@16384 master - 0 1667582455000 7 connected 0-5460
8b12adc7fff6e626fddbfe46b69b0a04051148c8 192.168.150.110:6381@16381 master,fail - 1667582395917 1667582390000 1 disconnected
1f46effff69e974a1586b67082570e70961b9abe 192.168.150.110:6385@16385 slave 8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d 0 1667582456405 2 connected

 可以看到redis-node-1的从节点变成了主节点，至此，redis3主3从集群搭建成功。

6、redis集群扩容

6、1 新建两个redis容器实例

$ docker run -d --name redis-node-7 --net host --privileged=true -v /redis/share/redis-node-7:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6387

$ docker run -d --name redis-node-8 --net host --privileged=true -v /redis/share/redis-node-8:/data -v /redis/redis.conf redis:6.0.8 --cluster-enabled yes --appendonly yes --port 6388

6、2 进入新增的端口为6387的容器实例内部

$ docker exec -it redis-node-7

 6、3 将新增的6387节点(空槽号)作为master节点加入原集群

$ redis-cli --cluster add-node 192.168.150.110:6387 192.168.150.110:6381

6、4 检查集群情况

root@gr:/data# redis-cli --cluster check 192.168.150.110:6381
192.168.150.110:6384 (4d440430...) -> 1 keys | 5461 slots | 1 slaves.
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 5462 slots | 1 slaves.
192.168.150.110:6387 (1d2a6729...) -> 0 keys | 0 slots | 0 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 5461 slots | 1 slaves.

可以看到新加入的节点redis-node-7此时并没有slot槽位。

6、5 重新分配槽位

$ redis-cli --cluster reshard 192.168.150.110:6381
How many slots do you want to move (from 1 to 16384)? 4096
What is the receiving node ID? 新加入节点的id
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1: all

6、6 再次检查集群情况

$ redis-cli --cluster check 192.168.150.110:6381
192.168.150.110:6384 (4d440430...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6387 (1d2a6729...) -> 1 keys | 4096 slots | 0 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 4096 slots | 1 slaves.

 可以看到新加入的节点已经分配了4096个槽位。

6、7 为新加入的主节点分配从节点

$ redis-cli --cluster add-node 192.168.150.110:6388 192.168.150.110:6387 --cluster-slave --cluster-master-id 新加入集群节点的id

6、8 再次查看集群情况

$ redis-cli --cluster check 192.168.150.110:6381
192.168.150.110:6384 (4d440430...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6387 (1d2a6729...) -> 1 keys | 4096 slots | 1 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 4096 slots | 1 slaves.
[OK] 2 keys in 4 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 192.168.150.110:6381)
S: 8b12adc7fff6e626fddbfe46b69b0a04051148c8 192.168.150.110:6381
   slots: (0 slots) slave
   replicates 4d4404303675e0fb887a73dccd0ae9e5f10edaf5
M: 4d4404303675e0fb887a73dccd0ae9e5f10edaf5 192.168.150.110:6384
   slots:[1365-5460] (4096 slots) master
   1 additional replica(s)
S: af0234e0d13117a44c8dc5c619bccfa1fdb4ff7a 192.168.150.110:6388
   slots: (0 slots) slave
....

可以看到从节点已经加入集群中，至此，redis集群的扩容已经成功。

7、redis集群缩容：

将加入集群的节点redis-node-7和redis-node-8从集群中删除。

7、1 删除从节点redis-node-8

$ redis-cli --cluster del-node 192.168.150.110:6388 redis-node-8的id

 7、2 检查是否删除成功

$ redis-cli --cluster check 192.168.150.110:6382
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6387 (1d2a6729...) -> 1 keys | 4096 slots | 0 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 4096 slots | 1 slaves.
192.168.150.110:6384 (4d440430...) -> 0 keys | 4096 slots | 1 slaves.
[OK] 2 keys in 4 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 192.168.150.110:6382)
M: 8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d 192.168.150.110:6382
   slots:[6827-10922] (4096 slots) master
   1 additional replica(s)
M: 1d2a6729c7c582d3e725e978c9511865e75a5e2f 192.168.150.110:6387
   slots:[0-1364],[5461-6826],[10923-12287] (4096 slots) master
M: aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51 192.168.150.110:6383
   slots:[12288-16383] (4096 slots) master
   1 additional replica(s)
S: 2dee6046534340e3f7db45e32fe02cf94b7b4e32 192.168.150.110:6386
   slots: (0 slots) slave
   replicates aa5ed45e1c2b5aeb6b3ed34337af9b90ace91e51
M: 4d4404303675e0fb887a73dccd0ae9e5f10edaf5 192.168.150.110:6384
   slots:[1365-5460] (4096 slots) master
   1 additional replica(s)
S: 8b12adc7fff6e626fddbfe46b69b0a04051148c8 192.168.150.110:6381
   slots: (0 slots) slave
   replicates 4d4404303675e0fb887a73dccd0ae9e5f10edaf5
S: 1f46effff69e974a1586b67082570e70961b9abe 192.168.150.110:6385
   slots: (0 slots) slave
   replicates 8b3a4a57bff74c389e7a3e4edbdb3d5edf2a613d

 可以看到redis-node-8已经成功删除。

7、3 清空主节点redis-node-7的槽位(可以分批分配出去，这里我直接分配给node4节点)

$ redis-cli --cluster reshard 192.168.150.110:6384
How many slots do you want to move (from 1 to 16384)? 4096
What is the receiving node ID? node4节点的Id
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1: 要删除节点的id
Source node #2: done

 7、4 查看要删除节点的槽位是否被分配

$ redis-cli --cluster check 192.168.150.110:6382
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6387 (1d2a6729...) -> 0 keys | 0 slots | 0 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 4096 slots | 1 slaves.
192.168.150.110:6384 (4d440430...) -> 1 keys | 8192 slots | 1 slaves.

 可以看到槽位已经被分配。

7、5 删除节点

$ redis-cli --cluster del-node 192.168.150.110:6387 要删除节点的id

 7、6 检查是否集群节点是否删除

$ redis-cli --cluster check 192.168.150.110:6382
192.168.150.110:6382 (8b3a4a57...) -> 0 keys | 4096 slots | 1 slaves.
192.168.150.110:6383 (aa5ed45e...) -> 1 keys | 4096 slots | 1 slaves.
192.168.150.110:6384 (4d440430...) -> 1 keys | 8192 slots | 1 slaves.

 可以看到节点已经被删除了。

至此，redis3主3从集群搭建和集群扩缩容已经实现。

ggrong0213
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
docker安装redis集群+sentinel
zn771335844的博客
05-30 386
查看端口26379进程，证明启动成功。如果启动失败，docker logs [container name or ID] 去查看启动失败日志。2、在docker中安装sentinel。查看端口6379进程，证明启动成功。1、在docker中安装redis。3、运行sentinel镜像。
docker里，redis集群的扩缩容
weixin_48607386的博客
09-28 399
扩缩容
docker的Redis集群搭建和集群的扩容缩容
qq_41165186的博客
11-09 392
docker搭建redis集群和集群的扩容缩容
docker部署redis集群实现动态扩缩容
m0_60615714的博客
05-13 931
基于哈希插槽分区，实现redis集群三主三从动态扩缩容 假如现有1~2亿的数据需要缓存，请问如何设置存储架构？？ 若是分布式存储，用redis如何实现落地？？ Redis集群中内置了16384个哈希槽，redis 会根据节点数量大致均等的将哈希槽映射到不同的节点。当需要在Redis集群中放置一个 key-value时，redis先对key使用crc16算法算出一个结果，然后把结果对16384求余数，这样每个key都会对应一个编号在0-16383之间的哈希槽，也就是映射到某个节点上。
基于docker的redis-cluster搭建、扩容、缩容
u010375456的博客
04-30 588
一、redis-cluster搭建 1、拉取redis镜像，我的版本是5.0.5 docker pull redis redis运行后查看版本命令，fdaac4274b6e是容器id docker exec -it fdaac4274b6e redis-server -v 2、在目录/opt/redis-cluster下新增6个文件夹，分别是6318、6319、6328、6329、6...
基于Docker搭建Redis集群并进行扩容、缩容教程
Brave_heart4pzj的博客
08-24 719
Redis集群及原理说明
Docker搭建redis主从+哨兵模式集群.docx
07-27
Docker搭建redis主从+哨兵模式集群.docx
docker 部署Redis集群节点.pdf
04-29
如果您需要部署一个Redis集群，Docker可以帮助您更轻松地完成此任务。以下是关于使用Docker部署Redis集群节点的一些资源： - [Redis Docker官方镜像文档](https://hub.docker.com/_/redis)：官方文档，包含了Redis ...
Linux中使用Docker搭建Redis集群
01-07
使用host网络进行搭建集群 docker的网络类型 docker的网络类型有： None:不为容器配置任何网络功能，没有网络 –net=none Container:与另一个运行中的容器共享Network Namespace，–net=container:containerID Host:...
docker-compose一键搭建Redis集群
06-12
1.先运行 createFile.py 输入宿主机IP地址，输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可
使用docker搭建redis一主二从三哨兵集群
01-09
这是本人在工作中搭建集群的实践经验，当时遇到很多问题，困扰了我好久，最后查看了好多文章成功解决所有问题，主从集群，哨兵监听都成功。现在分享出来，我就以一台服务器模拟搭建三台服务器的集群。请务必阅读每一...
Docker部署Redis集群
懒懒的树懒熊
07-07 271
Docker部署3主3从Redis集群 1.下载镜像 docker pull redis:6.0.5-alpine 2.创建redis配置文件 密码为redis2020pass，可自行修改 vi redis-cluster.tmpl port ${PORT} protected-mode no cluster-enabled yes cluster-config-file nodes.conf cluster-node-timeout 5000 cluster-announce-ip 130.120.
【redis】Spring之RedisTemplate配置与使用
05-30 333
转载：Spring之RedisTemplate配置与使用用过redis，但直接使用Jedis进行相应的交互操作，现在正好来看一下RedisTemplate是怎么实现的，以及使用起来是否更加便利。
使用Redis常遇到的问题
最新发布
刘皇叔说Java的博客
05-30 1050
性能问题：Redis通常以内存为主要存储介质，因此在处理大规模数据或高并发请求时可能会出现性能瓶颈。解决这个问题的方法包括优化Redis配置、增加硬件资源、使用Redis集群等。数据一致性：由于Redis的主从复制和分片机制，可能会出现数据一致性问题，例如主节点故障时数据丢失或者从节点数据落后于主节点。可以通过配置Redis的复制策略、监控主从同步状态、使用Redis-Cluster等方式来解决这个问题。
Redis-Cluster模式基操篇
MZZHAO23的博客
05-30 1025
Redis-Cluster模式基础操作
docker 安装mysql,redis,rabbitmq
weixin_50731688的博客
05-29 376
进入 到 /etc/docker 目录下，执行vi daemon.json,将下面参数粘贴复制到daemon.json,退出保存，在执行systemctl restart docker。7.安装时发现下载数据很慢，在这里配置远程仓库。
艾体宝洞察 | Redis Enterprise对比ElastiCache
虹科网络安全的博客
05-27 582
Redis Enterprise是由Redis开发者打造的先进内存数据库解决方案，可以作为ElastiCache的替代方案，提供经济高效且适合企业级规模构建应用程序的功能。它具备成本效益、可靠的服务质量、全球写入分布、扩展的数据类型和访问方法、灵活的部署选项以及来自Redis专家的支持。对于重要的缓存需求和高可用性要求，Redis Enterprise是优秀的选择。
05- Redis 中的 Zset 数据类型和应用场景
YoungSoulwt的博客
05-28 1222
Redis 中的 Zset 数据类型和应用场景
docker 部署redis集群
12-07
以下是使用Docker部署Redis集群的步骤： 1.拉取Redis官方镜像： ```shell docker pull redis ``` 2.创建一个自定义的网络： ```shell docker network create redis-net ``` 3.创建6个Redis容器，3个作为主节点，3...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值