docker-compose redis 6.2 cluster (二) 随机分配三主三从

已于 2023-03-24 15:50:53 修改
阅读量646 收藏
点赞数
分类专栏： Java 文章标签： redis docker 缓存
于 2022-05-14 14:14:20 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ppdouble/article/details/124705433
版权

文章目录

[docker redis 6.2 cluster (一) 随机分配三主三从]

ENV

Docker version 19.03.5, build 633a0ea838
docker-compose-1.22.0-2.fc29.noarch
compose file 3.7

code

code on github

创建目录和配置文件

创建配置文件并设置权限

basepath=$(pwd)
for port in $(seq 1 6); \
do \
mkdir -p ./node-${port}/conf
mkdir -p ./node-${port}/data
touch ./node-${port}/conf/redis.conf
sed -e "s/cluster-announce-ip 10.0.0.1/cluster-announce-ip 10.0.0.1${port}/" redis.conf > ./node-${port}/conf/redis.conf

chown -R redis-docker-root:redis-docker-root ${basepath}/node-${port}
chown -R redis-docker-user:redis-docker-root ${basepath}/node-${port}/data
done
ls
diff node-1/conf/redis.conf node-2/conf/redis.conf

使用 docker-compose 创建集群

version: '3.7'

x-image:
 &default-image
 redis:6.2
x-restart:
 &default-restart
 always

services:

 redis-cluster-1:
  image: *default-image
  container_name: redis-cluster-1
  restart: *default-restart
  working_dir: /data
  volumes:
  - /home/data/cluster/redis/compose/node-1/data:/data
  - /home/data/cluster/redis/compose/node-1/conf:/etc/redis/
  command: redis-server /etc/redis/redis.conf
  environment:
      - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  ports:
      - 7001:6379
      - 17001:16379
  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.11

 redis-cluster-2:
  image: *default-image
  container_name: redis-cluster-2
  restart: *default-restart
  working_dir: /data
  volumes:
  - /home/data/cluster/redis/compose/node-2/data:/data
  - /home/data/cluster/redis/compose/node-2/conf:/etc/redis/
  working_dir: /data
  command: redis-server /etc/redis/redis.conf
  environment:
  - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  ports:
      - 7002:6379
      - 17002:16379
  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.12

 redis-cluster-3:
  image: *default-image
  container_name: redis-cluster-3
  restart: *default-restart
  working_dir: /data
  volumes:
  - /home/data/cluster/redis/compose/node-3/data:/data
  - /home/data/cluster/redis/compose/node-3/conf:/etc/redis/
  command: redis-server /etc/redis/redis.conf
  environment:
  - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  - 'CLUSTER_CONFIG_FILE=/etc/redis/redis.conf'
  ports:
      - 7003:6379
      - 17003:16379
  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.13

 redis-cluster-4:
  image: *default-image
  container_name: redis-cluster-4
  restart: *default-restart
  working_dir: /data
  volumes:
  - /home/data/cluster/redis/compose/node-4/data:/data
  - /home/data/cluster/redis/compose/node-4/conf:/etc/redis
  command: redis-server /etc/redis/redis.conf
  environment:
  - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  ports:
      - 7004:6379
      - 17004:16379
  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.14
 redis-cluster-5:
  image: *default-image
  container_name: redis-cluster-5
  restart: *default-restart
  working_dir: /data
  volumes:
  - /home/data/cluster/redis/compose/node-5/data:/data
  - /home/data/cluster/redis/compose/node-5/conf:/etc/redis
  command: redis-server /etc/redis/redis.conf
  environment:
  - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  ports:
      - 7005:6379
      - 17005:16379
  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.15

 redis-cluster-6:
  image: *default-image
  container_name: redis-cluster-6
  restart: *default-restart
  working_dir: /data
  volumes:
    - /home/data/cluster/redis/compose/node-6/data:/data
    - /home/data/cluster/redis/compose/node-6/conf:/etc/redis
  command: redis-server /etc/redis/redis.conf
  environment:
    - 'REDIS_NODES=redis-cluster-1 redis-cluster-2 redis-cluster-3 redis-cluster-4 redis-cluster-5 redis-cluster-6'
  ports:
      - 7006:6379
      - 17006:16379

  networks:
      redis-cluster-net:
          ipv4_address: 10.0.0.16


networks:
    redis-cluster-net:
        ipam:
            driver: default
            config:
                - subnet: "10.0.0.0/24"

执行 docker-compose 命令

docker-compose --project-name mycomposeprj up -d

遇到 docker-compose-not-accepting-extensions-starting-with-x-invalid-top-level， 升级 docker-compose

在 host 机器查看目录权限

[hostuser@host-machine]$ ls -l node-1/
total 8
drwxr-xr-x. 2 redis-docker-root redis-docker-root 4096 May 14 13:22 conf
drwxr-xr-x. 2 redis-docker-user redis-docker-root 4096 May 14 13:24 data
[hostuser@host-machine]$ ls -l node-1/conf/
total 92
-rw-r--r--. 1 redis-docker-root redis-docker-root 93940 May 14 13:22 redis.conf
[hostuser@host-machine]$ ls -l node-1/data/
total 8
-rw-r--r--. 1 redis-docker-user redis-docker-user   0 May 14 13:22 appendonly.aof
-rw-r--r--. 1 redis-docker-user redis-docker-user 175 May 14 13:24 dump.rdb
-rw-r--r--. 1 redis-docker-user redis-docker-user 760 May 14 14:02 nodes.conf

随便进入一个结点容器
docker exec -it redis-cluster-5 bash

在进入的容器中创建集群
redis-cli --cluster create 10.0.0.11:6379 10.0.0.12:6379 10.0.0.13:6379 10.0.0.14:6379 10.0.0.15:6379 10.0.0.16:6379 --cluster-replicas 1

[hostuser@host-machine]$ docker exec -it redis-cluster-5 bash
root@4eac5c1df626:/data# redis-cli --cluster create 10.0.0.11:6379 10.0.0.12:6379 10.0.0.13:6379 10.0.0.14:6379 10.0.0.15:6379 10.0.0.16:6379 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 10.0.0.15:6379 to 10.0.0.11:6379
Adding replica 10.0.0.16:6379 to 10.0.0.12:6379
Adding replica 10.0.0.14:6379 to 10.0.0.13:6379
M: 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 10.0.0.11:6379
   slots:[0-5460] (5461 slots) master
M: 23dae408127ddd4a0308f2bad76b6efa94e0aac3 10.0.0.12:6379
   slots:[5461-10922] (5462 slots) master
M: a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 10.0.0.13:6379
   slots:[10923-16383] (5461 slots) master
S: 8b3a54b02e29d8e7633272c9edd0761c0c93b7bd 10.0.0.14:6379
   replicates a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a
S: b65d2c3ab466a0e81165024e64170ec756205a17 10.0.0.15:6379
   replicates 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7
S: 0342e4d71bd6a00ce808af5110c4c28129468abd 10.0.0.16:6379
   replicates 23dae408127ddd4a0308f2bad76b6efa94e0aac3
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
....
>>> Performing Cluster Check (using node 10.0.0.11:6379)
M: 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 10.0.0.11:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: b65d2c3ab466a0e81165024e64170ec756205a17 10.0.0.15:6379
   slots: (0 slots) slave
   replicates 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7
M: a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 10.0.0.13:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 8b3a54b02e29d8e7633272c9edd0761c0c93b7bd 10.0.0.14:6379
   slots: (0 slots) slave
   replicates a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a
M: 23dae408127ddd4a0308f2bad76b6efa94e0aac3 10.0.0.12:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 0342e4d71bd6a00ce808af5110c4c28129468abd 10.0.0.16:6379
   slots: (0 slots) slave
   replicates 23dae408127ddd4a0308f2bad76b6efa94e0aac3
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

11 主 15从，12主 16从，13主 14从

redis-cli -c 进入集群，并查看集群结点 cluster nodes

root@4eac5c1df626:/data# redis-cli -c
127.0.0.1:6379> cluster nodes
23dae408127ddd4a0308f2bad76b6efa94e0aac3 10.0.0.12:6379@16379 master - 0 1652505902918 2 connected 5461-10922
b65d2c3ab466a0e81165024e64170ec756205a17 10.0.0.15:6379@16379 myself,slave 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 0 1652505901000 1 connected
1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 10.0.0.11:6379@16379 master - 0 1652505901915 1 connected 0-5460
a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 10.0.0.13:6379@16379 master - 0 1652505903922 3 connected 10923-16383
8b3a54b02e29d8e7633272c9edd0761c0c93b7bd 10.0.0.14:6379@16379 slave a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 0 1652505903000 3 connected
0342e4d71bd6a00ce808af5110c4c28129468abd 10.0.0.16:6379@16379 slave 23dae408127ddd4a0308f2bad76b6efa94e0aac3 0 1652505904926 2 connected

使用 Java 查看使用集群

import redis.clients.jedis.HostAndPort;
import redis.clients.jedis.JedisCluster;

import java.util.HashSet;
import java.util.Set;

public class Main {
    public static void main (String[] args) {
        Set<HostAndPort> jedisClusterNodes = new HashSet<HostAndPort>();
        jedisClusterNodes.add(new HostAndPort("localhost", 7003));
        JedisCluster jedis = new JedisCluster(jedisClusterNodes);
        System.out.println(jedis.getClusterNodes().keySet());
        jedis.set("planets", "Mars");
        System.out.println(jedis.get("planets"));
    }
}

在字符界面客户端 redis-cli 查看

127.0.0.1:6379> get planets
-> Redirected to slot [8813] located at 10.0.0.12:6379
"Mars"
10.0.0.12:6379> set planets Earth
OK
10.0.0.12:6379> get planets
"Earth"

关闭主结点 10.0.0.12，docker stop redis-cluster-2
可以看到从结点 10.0.0.16 变成主结点

root@4eac5c1df626:/data# redis-cli -c
127.0.0.1:6379> get planets
-> Redirected to slot [8813] located at 10.0.0.16:6379
"Earth"
10.0.0.16:6379> cluster nodes
23dae408127ddd4a0308f2bad76b6efa94e0aac3 10.0.0.12:6379@16379 master,fail - 1652508145885 1652508142000 2 connected
a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 10.0.0.13:6379@16379 master - 0 1652508217000 3 connected 10923-16383
0342e4d71bd6a00ce808af5110c4c28129468abd 10.0.0.16:6379@16379 myself,master - 0 1652508218000 7 connected 5461-10922
8b3a54b02e29d8e7633272c9edd0761c0c93b7bd 10.0.0.14:6379@16379 slave a2a514c416be4d2ad8e9ef5b8e16a11d40a8214a 0 1652508217200 3 connected
b65d2c3ab466a0e81165024e64170ec756205a17 10.0.0.15:6379@16379 slave 1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 0 1652508216197 1 connected
1cfa486c1f49ccdaa5e3faffbf6e42d196a325d7 10.0.0.11:6379@16379 master - 0 1652508218204 1 connected 0-5460

Ref

  1. redis docker-compose bitnami sample
  2. Redis Cluster基于Docker的集群搭建 jianshu
  3. redis集群搭建
  4. docker-compose.yml sample github
  5. docker-compose-does-not-accept-my-volumes-declaration stackoverflow
  6. volumes-type-is-a-required-property-when-running-docker-compose superuser
  7. Officle Doc compose-file
  8. github issue Volume must be a mapping, not an array #5092
  9. volume must be a mapping not a string
  10. how-do-i-mount-a-host-directory-as-a-volume-in-docker-compose stackoverflow
  11. run-redis-with-docker-compose
  12. Docker环境下秒建Redis集群 tencent
  13. 如何用docker部署redis cluster cnblogs
  14. Official Doc Use bridge networks
  15. https://newbedev.com/get-docker-compose-yml-file-location-from-running-container
  16. Official Doc Compose specification
  17. Official Doc Use volumes
  18. Official sample redis 6.2 configuration file
  19. building-redis-cluster-with-docker-compose
ppdouble
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
docker-compose redis主从哨兵 redis多节点高可用 redis集群高可用
04-12
在Docker Compose文件中，我们需要定义三个服务，一个为主节点，两个为从节点，并设置相应的端口映射和环境变量，如`REPLICAOF`来指定从节点复制主节点。 2. **Redis哨兵系统（Sentinel）**：哨兵是Redis的监控和...
docker-compose一键搭建Redis集群
06-12
1.先运行 createFile.py 输入宿主机IP地址，输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可
Docker安装最新Redis6（redis-6.2.7）（参考官方文档）
u014282578的博客
12-07 4109
本教程参考官方文档在Docker中安装最新稳定版Redis-6.2.7，官方文档有些细节没有说明，笔者因此踩了不了坑。
docker-compose 安装redis
u010141170的专栏
08-22 4971
docker-compose 安装redis
docker-compose部署Redis6.0
最新发布
木子李的博客
06-06 581
CentOS、docker、docker-compose、redis6.0部署
Docker-compose 安装 redis
weixin_42225792的博客
06-19 5259
这里需要修改requirepass，也就是你的密码。
Docker-Compose搭建Redis高可用一主二从三哨兵集群
a1764739438的博客
08-28 1274
使用docker-compose搭建Redis高可用一主二从三哨兵集群
docker-compose部署redis主从集群 —— 筑梦之路
筑梦之路
06-06 498
Redis（全称：Remote Dictionary Server，即远程字典服务器）是一个开源的高性能键值数据库和缓存系统。Redis 的数据结构支持字符串、哈希表、列表、集合和有序集合等类型。同时，Redis 还提供了丰富的操作指令，例如 GET/SET、INCR/DECR、HGET/HSET、LPUSH/RPUSH、SADD/SMEMBERS、ZADD/ZRANGE 等。除此之外，Redis 还支持事务、过期时间、发布/订阅等特性，能够方便地实现各种高效的数据存储和读取方案。
docker-redis-cluster:一个 Redis 集群 Docker 镜像
05-29
docker-redis-cluster Redis 集群 Docker 映像。 此图像用于测试环境。 请勿将其用于生产。用法启动集群。 它将启动 6 个 Redis 服务器，监听7000~7005端口和一个主管以确保所有服务器都启动。 在所有服务器启动后，...
redis-cluster-docker-compose:docker-compose部署redis部署
03-22
redis-集群-docker-组成docker-compose部署redis部署部署过程安装docker，docker-compose执行gconf.sh脚本，参数1：启动端口，参数2：结束端口，参数3：主机机执行命令docker-compose up --build -d执行cc.sh脚本
docker-compose安装包
12-19
Docker-Compose将所管理的容器分为三层，分别是工程（project），服务（service）以及容器（container）。Docker-Compose运行目录下的所有文件（docker-compose.yml，extends文件或环境变量文件等）组成一个工程，若...
docker compose部署redis集群
01-10
docker compose部署redis集群，三主三从，并且外网可以访问，另外还可以从gitee上获取此文件，gitee上除了Redis之外还会陆续提供其他docker部署的文件，https://gitee.com/korov/Docker.git
Docker 安装Redis 6.2.5
你就是唯一づ
09-07 886
安装前提：需要安装Docker 一、拉取 Redis 镜像 从dockerHub找合适的镜像版本 找到合适的版本，然后拉取镜像（本次使用 6.2.5 版本） # 拉取镜像 docker pull redis:6.2.5 # 拉取完后查看是否拉取成功 docker images 二、编写配置文件 在合适的位置创建文件夹，用户保存备份文件和配置文件 # 创建文件夹——>进入——> 创建 config、data 文件夹——>在 config 文件夹中创建 redis.
docker-compose构建redis集群（3主3从）并配置密码
u014692704的博客
06-26 927
1.创建数据目录 [root@localhost redis]# pwd /data/redis [root@localhost redis]# mkdir 700{1..6}/data ##这个目录和下边yml文件的volumes对应 [root@localhost redis]# ls 7001 7002 7003 7004 7005 7006 docker-compose.yml 2.创建一个docker-compose.yml文件，内容如下： version: '3' services: re
Redis配置文件
b27458925的博客
07-31 372
Redis配置文件redis.conf配置解析 欢迎一起讨论 Geooo的个人博客：https://geooo.gitee.io/geoooblog/ Redis内存大小表示 # Note on units: when memory size is needed, it is possible to specifiy # it in the usual form...
docker-compose实现Redis 哨兵模式
myli92的博客
08-03 790
之前写的一篇文章，主要讲了docker实现Redis 单机，哨兵，集群模式。如果只是部署几个容器还比较简单，但是随着容器环境的增加，每次使用docker命令启动创建容器，这些工作就比较复杂。所以本文主要使用docker-compose编排容器实现redis的哨兵模式。 1.安装docker-compose 这个可以参考官网https://docs.docker.com/compose/install/。安装完成之后可以查看docker-compose version的版本 2.编排redis主从.
docker搭建三主三从redis集群使用Docker Compose
qq_55648724的博客
02-09 304
wu
docker-compose编排参数详解
ss810540895的博客
04-26 3532
Compose是一个用于定义和运行多容器Docker应用程序的工具。使用Compose，您可以使用YAML文件来配置应用程序的服务。然后，使用单个命令，您可以从配置中创建并启动所有服务。Compose可以.yml 或 .yaml 作为文件扩展名。Compose适用于所有环境：生产，登台，开发，测试以及CI工作流程。关于 docker compose 技术可以查看官方文档以下的内容是确立在已经下载好 Docker 以及 Docker Compose，可参看 Docker Compose 的官方安装教程。
利用docker-compose 搭建redis哨兵集群
weixin_55625082的博客
04-14 178
​ 6377 是master 的端口。注：只能使用ip登录，回环地址不能登录。
docker-compose redis
06-28
上面的docker-compose.yml文件定义了一个名为“redis”的服务，它使用了Redis官方提供的Docker镜像，并将容器的6379端口映射到主机的6379端口。可以使用以下命令启动该容器： ``` docker-compose up -d ``` 执行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值