使用docker 搭建 redis 集群

最新推荐文章于 2024-05-14 15:28:20 发布
最新推荐文章于 2024-05-14 15:28:20 发布
阅读量701 收藏
点赞数 1
分类专栏： 服务搭建 文章标签： linux docker 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xintuyuyu/article/details/107091741
版权

docker redis 集群搭建

本教程使用官方redis 镜像+docker-compose 完成整个redis集群的搭建，之所以使用docker-compose 是因为只需要写好配置文件部署执行方便

 

docker redis 集群搭建省略步骤正式开始

 

省略步骤

请参考docker官方文档

  1. docker 安装

  2. docker compose 安装

 

正式开始

说白了都是配置文件

为了下面不迷路，先把配置的目录结构贴上 不要急着建目录结构，大多目录后面我有脚本直接生成，下面高亮的为目录：

redis-cluster

-data

--7000

----conf

----data

----logs

--7001

----conf

----data

----logs

--7002

----conf

----data

----logs

--7003

----conf

----data

----logs

--7004

----conf

----data

----logs

--7005

----conf

----data

----logs

--redis-cluster.tmpl

--docker-compose.yml

好了，以上就是这次集群的目录结构，解释一下：

  1. redis-cluster 目录不用说了是我们工作空间

  2. data 目录是所有redis 节点配置文件所以在目录

  3. data 目录下的700x 目录是针对单个节点的配置所在目录，至于700x 是redis 服务的端口。端口目录下的 conf 目录下存了当前redis 节点的真实配置文件。至于端口下的data目录是我docker volume 映射的目录，这个当然你随便。

  4. redis-cluster.tmpl 为redis 节点的模板文件

  5. 至于docker-compose.yml 文件就不必说了这个是docker-compose 启动服务的配置文件

 

  1. 首先新建了一个工作目录 redis-cluster

由于我实现redis 集群用了6台redis 节点 ，每台都要写配置文件总不方便

所以

首先为redis 配置文件文件创建了一个模板 我命名为 redis-cluster.tmpl 以下内容：

 ##节点端口
 port ${PORT}                                       
 ##开启集群模式
 protected-mode no                                  
 ##cluster集群模式
 cluster-enabled yes                                
 ##集群配置名
 cluster-config-file nodes.conf          
 ##超时时间           
 cluster-node-timeout 5000   
 ##实际为各节点网卡分配ip                      
 cluster-announce-ip 172.19.0.${IPEND}           
 ##节点映射端口       
 cluster-announce-port ${PORT}           
 ##节点总线端口           
 cluster-announce-bus-port 1${PORT}  
 ##持久化模式               
 appendonly yes 
   

这里有个配置需要解释一下：cluster-announce-ip 这个参数的值 172.19.0.${IPEND} 不是我随便写的，这个是取自docker service 使用的network 的网关地址。如果你无法确定 请使用`docker inspect <network-name> 查看。

 

  1. 生成配置

    使用上面模板加上如下脚本来生成我们需要的redis 各个节点的目录和配置，你可以把下面脚本写进xx.sh 文件放到redis-cluster 工作空间执行

     #!/bin/bash
 for port in `seq 7000 7005`; do 
   mkdir -p ./data/${port}/conf && PORT=${port} IPEND=17${port:0-1:1} envsubst < ./redis-cluster.tmpl > ./data/${port}/conf/redis.conf && mkdir -p ./data/${port}/data; 
 done

    到此开始我们展示的目录及除了 docker-compose.yml 文件都已经全了

     

    1. 写 docker-compose.yml 文件

       

      version: '3'
 services:
   redis-7000: 
     image: redis:latest
     container_name: redis-7000
     volumes: 
       - ./data/7000/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7000/data:/data
       - ./data/7000/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7000:7000"
       - "17000:17000"
     restart: always
     networks: 
       redis-net:
         ipv4_address: 172.19.0.170
     logging:  
       driver: "json-file"
       options: 
         max-size: "1m"
 ​
 ​
   redis-7001: 
     image: redis:latest
     container_name: redis-7001
     volumes: 
       - ./data/7001/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7001/data:/data
       - ./data/7001/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7001:7001"
       - "17001:17001"
     restart: always
     networks:  
       redis-net:
         ipv4_address: 172.19.0.171
     logging: 
       driver: "json-file"
       options: 
         max-size: "1m"   
 ​
 ​
   redis-7002: 
     image: redis:latest
     container_name: redis-7002
     volumes: 
       - ./data/7002/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7002/data:/data
       - ./data/7002/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7002:7002"
       - "17002:17002"
     restart: always
     networks: 
       redis-net:
         ipv4_address: 172.19.0.172
     logging: 
       driver: "json-file"
       options: 
         max-size: "1m" 
 ​
 ​
   redis-7003: 
     image: redis:latest
     container_name: redis-7003
     volumes: 
       - ./data/7003/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7003/data:/data
       - ./data/7003/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7003:7003"
       - "17003:17003"
     restart: always
     networks: 
       redis-net:
         ipv4_address: 172.19.0.173
     logging: 
       driver: "json-file"
       options: 
         max-size: "1m" 
 ​
 ​
   redis-7004: 
     image: redis:latest
     container_name: redis-7004
     volumes: 
       - ./data/7004/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7004/data:/data
       - ./data/7004/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7004:7004"
       - "17004:17004"
     restart: always
     networks: 
       redis-net:
         ipv4_address: 172.19.0.174
     logging: 
       driver: "json-file"
       options: 
         max-size: "1m" 
 ​
 ​
   redis-7005: 
     image: redis:latest
     container_name: redis-7005
     volumes: 
       - ./data/7005/conf/redis.conf:/usr/local/etc/redis/redis.conf
       - ./data/7005/data:/data
       - ./data/7005/logs:/usr/local/redis/logs
     command: redis-server /usr/local/etc/redis/redis.conf --requirepass yasin
     ports: 
       - "7005:7005"
       - "17005:17005"
     restart: always
     networks: 
       redis-net:
         ipv4_address: 172.19.0.175
     logging: 
       driver: "json-file"
       options: 
         max-size: "1m" 
      
 ​
 networks:
  redis-net:
   external: true
       

--requirepass yasin 这个是我为每个redis node 设置了 密码 yasin ,不需要可以去掉。

ipv4_address 这里的ip地址一定要与redis.conf 中的地址一致.

external: true 这里external 值为true 是我事前创建了docker network create --driver bridge redis-net 如果是Windows 机器可能会失败 可以再尝试docker network create --driver nat redis-net

  1. 创建并启动容器

    好了，配置文件准备就绪就让我们看一下效果吧，在我们的工作空间下执行以下命令来创建我们的6台 docker redis 服务：

    docker-compose up

     

  2. 组建集群

服务起来之后剩下的事情就是让6台redis 感知到彼此,进入到其中一台容器

docker exec -it redis-7000 bash

(容器内执行)

 for N in `seq 0 5` ; do 
     redis-cli -h 172.19.0.170 -p 7000 -a yasin cluster meet 172.19.0.17${N} 700${N};
 done

teps: 我在执行到这一步的时候吃了大亏，按理说只要一台节点去感知了其他节点其他节点都会自动相互感知，但是当时执行到这一步时，没有执行上面命令的节点死活感知不到其他节点。问题在于reds 的配置文件里我把 cluster-announce-ip 172.19.0.${IPEND} 写死为 cluster-announce-ip 0.0.0.0 导致其他节点一直在执行 ：

cluster meet 0.0.0.0 7000

cluster meet 0.0.0.0 7001

cluster meet 0.0.0.0 7002

cluster meet 0.0.0.0 7003

cluster meet 0.0.0.0 7004

cluster meet 0.0.0.0 7005

其中一台节点怎么可能同时用于700x的所有redis 端口呢！

检查一下所有节点是否都感知到了彼此：在每台节点执行如下命令 打印出6台节点的信息记录下每行的id （节点标识），很重要下面要用

(容器内执行)

redis-cli -h 172.19.0.170 -p 7000 -a yasin cluster nodes

到此redis 集群搭建完成

 

  1. 分配槽点

6 个节点，我们选出端口为7000、7001、7002 三台为master 节点 ，并且为他们分配槽点

(容器内执行)

 redis-cli -h 172.19.0.170 -p 7000 -a yasin  CLUSTER ADDSLOTS {0,5461}
 redis-cli -h 172.19.0.171 -p 7001 -a yasin  CLUSTER ADDSLOTS {5462,10922}
 redis-cli -h 172.19.0.171 -p 7001 -a yasin  CLUSTER ADDSLOTS {10923,16383}

 

  1. 分配slave

(容器内执行) 这里就用到了上面记录的 节点标识

 # 此命令是在 从redis节点内执行 关联到 主redis 的节点标识
 # 主 redis-7000 从 redis-7003
 /usr/local/bin/redis-cli -h 172.19.0.173 -p 7003 -a yasin CLUSTER REPLICATE 5631cd7205b964c0c848ddc7292835fa8a4df57c
 # 主 redis-7001 从 redis-7004
 /usr/local/bin/redis-cli -h 172.19.0.174 -p 7004 -a yasin CLUSTER REPLICATE d0423573bfe628fb03cee2feead667ef5679c17d
 # 主 redis-7002 从 redis-7005
 /usr/local/bin/redis-cli -h 172.19.0.175 -p 7005 -a yasin CLUSTER REPLICATE 8563d43bf400b6435a921f4783420cca02fa2d5a

 

  1. 集群密码

    如果需要可以为集群设置密码(容器内执行 密码yasin

for n in `seq 0 5` ; do 
     # 为每个节点设相同密码
     redis-cli -h 172.19.0.17${n} -p 700${n} -a yasin config set requirepass yasin;
     # 为slave节点设置主节点的密码，可能用于同步主节点数据验证使用(我这里为所有节点都设置了)
     redis-cli -h 172.19.0.17${n} -p 700${n} -a yasin config set masterauth yasin;
 done

 

  1. 验证、结束

到目前redis cluster 搭建结束，试一下集群连接 注意命令中的 -c 是用于连接集群的。

redis-cli -h -c 172.19.0.170 -p 7000 -a yasin set name 张三
 
for n in `seq 0 5` ; do 
     redis-cli -h -c 172.19.0.17${n} -p 700${n} -a yasin get name 张三
 done

 

 

哈哈咕嘎
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis部署-docker-离线方式
暮雪超霸
01-25 318
redis部署 redis docker部署 docker pull registry.docker-cn.com/library/redis docker-compose.yml version: '2' services: redis: image: redis:latest container_name: redis restart: always...
docker下的redis集群
weixin_45209596的博客
03-14 581
docker部署redis集群；redis.conf,redis配置文件详解，redis集群的扩容缩容，主节点的扩容缩容，从节点的扩容缩容。
2024年最全Docker环境下的Redis集群简介_docker redis简介，惊喜
最新发布
2401_84910951的博客
05-14 161
该redis镜像, ruby环境和脚本已经安装, 可以直接去执行ruby脚本创建RedisCluster集群。
Docker:创建主从复制的Redis集群
qq_59403228的博客
10-24 1075
主从复制的模式来提升性能用集群模式来提升吞吐量并提升可用性。
使用docker搭建 redis cluster 集群
回首那天的博客
11-09 1942
使用docker搭建 redis cluster 集群
【Redis】深入探索 Redis 集群（Cluster）模式的概念、原理、数据分片算法，基于 Docker 模拟搭建 Redis 集群分布式架构
qq_61635026的博客
09-22 779
Redis Cluster 是一种分布式集群模式，它允许将数据分散存储在多个节点上，从而提供了横向扩展、高可用性和更大存储容量。Redis Cluster 有以下关键特点： 分布式数据存储: Redis Cluster 将数据划分为多个槽（slot），这些槽分布在不同的节点上。每个节点负责管理一部分槽中的数据，这样数据可以分布在多个节点上，避免了单节点存储容量的限制。 自动数据分片: Redis Cluster 使用哈希槽来分片数据，客户端根据键的哈希值将数据路由到正确的节点。这使得数据的分片和路由是自
Linux中使用Docker搭建Redis集群
01-07
使用host网络进行搭建集群 docker的网络类型 docker的网络类型有： None:不为容器配置任何网络功能，没有网络 –net=none Container:与另一个运行中的容器共享Network Namespace，–net=container:containerID Host:...
docker-compose一键搭建Redis集群
06-12
1.先运行 createFile.py 输入宿主机IP地址，输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可
使用docker搭建redis一主二从三哨兵集群
01-09
我使用的是阿里云的centos7服务器，好像centos必须要7版本以上才支持安装使用docker。不管是什么linux系统基本就几个简单的步骤：更新yum，然后直接用yum安装docker，然后启动docker，还可以设置为开机启动。如果...
Docker快速搭建Redis集群的方法示例
09-08
主要介绍了Docker快速搭建Redis集群的方法示例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
Docker安装Redis集群失败经历汇总
帝上无天的博客
11-28 2559
在程序员的开发过程中，Redis可以说基本上是必不可少的缓存中间件。不管是二进制包还是docker安装Redis的文章在网上都是数不胜数。我之前自己玩Redis的时候基本不是二进制包安装就是docker安装，也没有尝试过集群方式。每次需要的时候，网上百度一篇文章，安装一个单机版的，有的时候行，有的文章不行。也正是因为这个原因，本篇文章就想着自己创建Redis，通过docker方式进行部署。算是记录一下，方便以后使用。最后，然后我们再安装一下Redis集群模式。
十款入门级微信小程序源码分享之三
2401_84046895的博客
04-12 420
分享一些资料给大家，我觉得这些都是很有用的东西，大家也可以跟着来学习，查漏补缺。《Java高级面试》《Java高级架构知识》《算法知识》《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！38637)]《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！
如何用Docker在Windows上搭建一个Cluster集群
zby002的博客
09-16 731
Docker在Windows上搭建Redis-Cluster集群
redis-基于docker搭建redis集群
weixin_42128977的博客
11-02 844
学习了redis的主从，哨兵之后，学习redis高可用的最后一篇集群。学习集群不着急，先来看看怎么搭建集群。现在都讲究容器化部署，咱也来试试基于docker搭建redis集群。ps:我只有一台虚拟机，所以。。。。。将就一下。
Docker方式实现Redis主从方式集群（超详细）
weiming的博客
03-18 1764
首先要了解redis的集群概念，这里不再赘述 首先，我们启用三个不同的端口作为从机 docker run -d -p 6379:6379 --name redis01 redis docker run -d -p 6380:6379 ----name redis02 redis docker run -d -p 6381:6379 -name redis03 redis 6382 作为主机 docker run -d -p 6382:6379 --name redismaster redis 查看镜像运
使用docker搭建redis集群（两种方式）
weixin_44015043的博客
04-30 4522
文章目录前言第一种：端口映射第二种：端口直接访问后记 前言 前面我已经完成了对于Mysql数据库集群的搭建，这里来完成对Redis数据库集群的搭建。这里就提供两种关于redis集群的搭建： 在docker中使用端口映射的技术，何为端口映射，就是说当我们建立完成redis集群以后，在使用RDM（Redis客户端）访问时候访问地址类似于 172.18.0.1:6379，172.18.0.2:6379...
docker 搭建redis集群(超级简单)
你太过耀眼的博客
01-13 1059
1.先拉redis镜像 docker pull redis:5 2.运行redis实例 redis-7000的配置文件redis.conf(linux的路径设置为/root/docker/redis/redis-7000/redis.conf) 将内容复制进去 port 7000 #如果是yes，表示启用集群，否则以单例模式启动 cluster-enabled yes #可选，这不是...
使用docker快速搭建redis单机
KK下山去买菜
12-29 373
文章目录环境准备安装docker创建目录创建配置文件启动 环境准备 节点名称 ip地址 redis-node3 192.168.130.21 安装docker 参考XX 创建目录 mkdir -p /root/redis/data mkdir -p /root/redis/config mkdir -p /root/redis/log touch /root/redis/log/redis.log && chmod 777 /root/redis/log/redis.l
通过docker搭建redis集群
08-23
通过以上步骤，你可以使用docker搭建Redis集群，并查看集群的状态。请根据实际情况进行操作。<span class="em">1</span><span class="em">2</span><span class="em">3 #### 引用[.reference_title] - *1* *2* *3* ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值