docker + redis Cluster集群搭建

最新推荐文章于 2022-04-22 16:07:55 发布
最新推荐文章于 2022-04-22 16:07:55 发布
阅读量181 收藏
点赞数
文章标签： docker redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39712708/article/details/104616285
版权

简单介绍：
1.应用场景：主要是针对海量数据+高并发+高可用的场景

2.好处：
1）将数据自动切分到多个节点的能力。
2）当集群中的一部分节点失效或者无法进行通讯时， 仍然可以继续处理命令请求的能力，拥有自动故障转移的能力。

3.分区采用：虚拟槽分区

搭建：
1）准备节点。 2）节点握手。 3）分配槽。

准备节点：
创建redis dockerfile镜像文件
FROM ruby:2.5-alpine
RUN sed -i ‘s/dl-cdn.alpinelinux.org/mirrors.aliyun.com/g’ /etc/apk/repositories
&& apk add gcc g++ libc-dev wget vim openssl-dev make linux-headers bash
&& rm -rf /var/cache/apk/*

RUN wget https://rubygems.org/downloads/redis-4.0.2.gem && gem install -l ./redis-4.0.2.gem
&& rm -f redis-4.0.2.gem

#通过选择更小的镜像，删除不必要文件清理不必要的安装缓存，从而瘦身镜像
#创建相关目录能够看到日志信息跟数据跟配置文件
RUN mkdir -p /usr/src/redis
&& mkdir -p /usr/src/redis/data
&& mkdir -p /usr/src/redis/conf
&& mkdir -p /usr/src/sh
&& mkdir -p /usr/src/redis/log

RUN wget -O /usr/src/redis/redis-4.0.11.tar.gz “http://download.redis.io/releases/redis-4.0.11.tar.gz”
&& tar -xzf /usr/src/redis/redis-4.0.11.tar.gz -C /usr/src/redis
&& cp /usr/src/redis/redis-4.0.11/src/redis-trib.rb /usr/src/redis/
&& rm -rf /usr/src/redis/redis-4.0.11.tar.tgz

RUN cd /usr/src/redis/redis-4.0.11 && make && make PREFIX=/usr/local/redis install
&& ln -s /usr/local/redis/bin/* /usr/local/bin/ && rm -rf /usr/src/redis/redis-4.0.11

COPY ./redis/sh/cluster.sh /usr/src/sh
COPY ./redis/sh/redis-trib.rb /usr/src/sh/redis-trib.rb
RUN chmod +x /usr/src/sh/cluster.sh && chmod +x /usr/src/sh/redis-trib.rb

创建镜像
docker build -t redis-cluster .

使用docker-composer编排
docker-composer.yaml文件如下
version: “3.6”
services: #服务
master-1:
image: redis-cluster
container_name: cluster-1
environment:

  • REALIP=192.168.80.128
  • PORT=6390
  • PORT2=16390 #集群开放的端口
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.176 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6390:6379”
  • “16390:16379”
    volumes:
  • /home/docker/clustre/redis/master-1:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    master-2:
    image: redis-cluster
    container_name: cluster-2
    environment:
  • REALIP=192.168.80.128
  • PORT=6391
  • PORT2=16391
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.177 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6391:6379”
  • “16391:16379”
    volumes:
  • /home/docker/clustre/redis/master-2:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    master-3:
    image: redis-cluster
    container_name: cluster-3
    environment:
  • REALIP=192.168.80.128
  • PORT=6392
  • PORT2=16392
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.178 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6392:6379”
  • “16392:16379”
    volumes:
  • /home/docker/clustre/redis/master-3:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    master-4:
    image: redis-cluster
    container_name: cluster-7
    environment:
  • REALIP=192.168.80.128
  • PORT=6396
  • PORT2=16396
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.179 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6396:6379”
  • “16396:16379”
    volumes:
  • /home/docker/clustre/redis/master-4:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    slave-1:
    image: redis-cluster
    container_name: cluster-4
    environment:
  • REALIP=192.168.80.128
  • PORT=6393
  • PORT2=16393
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.180 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6393:6379”
  • “16393:16379”
    volumes:
  • /home/docker/clustre/redis/slave-1:/usr/src/redis
    entrypoint:
  • /bin/sh
  • /usr/src/sh/cluster.sh
    slave-2:
    image: redis-cluster
    container_name: cluster-5
    environment:
  • REALIP=192.168.80.128
  • PORT=6394
  • PORT2=16394
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.181 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6394:6379”
  • “16394:16379”
    volumes:
  • /home/docker/clustre/redis/slave-2:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    slave-3:
    image: redis-cluster
    container_name: cluster-6
    environment:
  • REALIP=192.168.80.182
  • PORT=6395
  • PORT2=16395
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.25 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6395:6379”
  • “16395:16379”
    volumes:
  • /home/docker/clustre/redis/slave-3:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    slave-4:
    image: redis-cluster
    container_name: cluster-8
    environment:
  • REALIP=192.168.80.128
  • PORT=6398
  • PORT2=16398
    networks:
    redis-network: #网络名称
    ipv4_address: 192.168.1.183 #设置ip地址
    working_dir: /usr/src/redis #工作目录
    stdin_open: true
    tty: true
    ports:
  • “6398:6379”
  • “16398:16379”
    volumes:
  • /home/docker/clustre/redis/slave-4:/usr/src/redis
    entrypoint:
  • /bin/bash
  • /usr/src/sh/cluster.sh
    #引用外部预先定义好的网段
    networks:
    redis-network:
    external:
    name: redis-network

配置集群配置文件
开启集群 cluster-enabled yes
cluster-config-file “nodes-6379.conf”

运行
docker-compose up -d
创建集群节点

[root@localhost clustre]# docker-compose ps
cluster-1 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16390->16379/tcp, 0.0.0.0:6390->6379/tcp
cluster-2 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16391->16379/tcp, 0.0.0.0:6391->6379/tcp
cluster-3 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16392->16379/tcp, 0.0.0.0:6392->6379/tcp
cluster-4 /bin/sh /usr/src/sh/cluster.sh Up 0.0.0.0:16393->16379/tcp, 0.0.0.0:6393->6379/tcp
cluster-5 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16394->16379/tcp, 0.0.0.0:6394->6379/tcp
cluster-6 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16395->16379/tcp, 0.0.0.0:6395->6379/tcp
cluster-7 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16396->16379/tcp, 0.0.0.0:6396->6379/tcp
cluster-8 /bin/bash /usr/src/sh/clus … Up 0.0.0.0:16398->16379/tcp, 0.0.0.0:6398->6379/tcp

节点握手
在一个节点上依次将其余节点全部握手
docker exec -it cluster-1 bash
cluster meet 192.168.80.128 6391
依次进行握手
cluster nodes 查看集群连接信息

分配槽
通过 cluster addslots 命令为节点分配槽
redis-cli -h 192.168.80.128 -p 6390 -a sixstar cluster addslots {0…4461}
redis-cli -h 192.168.80.128 -p 6391 -a sixstar cluster addslots {4462…8462}
redis-cli -h 192.168.80.128 -p 6392 -a sixstar cluster addslots {8463…12463}
redis-cli -h 192.168.80.128 -p 6396 -a sixstar cluster addslots {12464…16383}

测试：
bash-5.0# redis-cli -a sixstar -c
127.0.0.1:6379> set redis redis
-> Redirected to slot [9169] located at 192.168.80.128:6392
根据key计算出不通的值放入不通的槽

集群搭建完毕

Bruce Csdn
关注
Mac中使用Docker搭建Redis Cluster集群
sdujava2011
06-01 1019
是真的脑抽才会用Docker搭redis集群，homebrew安装的redis配多个配置文件应该也可以直接搭建，时间全花在搞Docker上了，后续有时间了搞一下另一种搭建方式再写一篇博客。真心建议不要用MacOS搭服务，很痛苦，有时候觉得还不如Windows。开发的话还可以。
linux使用docker + docker compose 本地搭建redis cluster集群
班门弄斧
12-05 2030
背景 项目用到一个redis库，对于里面的集群相关功能要自己测试（就像《代码简洁之道》中说的，使用第三方库需要自己有测试用例，这样即使第三方库更新了，直接用原来的测试用例，也知道是否能兼容）。所以需要自己本地搭建redis集群测试。 搭建是使用docker搭建的，一下需要启动很多个container，所以使用docker-compose作为容器编排我的环境已经有了，没有的自己下载 直接上redis-cluster模式 redis集群有三种模式：master+slave(主从)、sentinel(哨兵)、cl
docker、docker-compose 一键安装sentinel高可用redis集群
01-23
docker、docker-compose 一键安装sentinel高可用redis集群 (一台虚拟机上安装的伪高可用集群，学习使用，可以修改文件配置相关参数，非原创，亲测可用) 安装前先安装 docker、docker-compose 第一步(脚本文件可以修改) /usr/local/下依次建docker、redis、sentinel目录“/usr/local/docker/redis/sentinel” 第二步 将 docker-compose.yml放在 /usr/local/docker/redis 下 Dockerfile、sentinel.conf 、sentinel-entrypoint.sh 放在 /usr/local/docker/redis/sentinel 下 第三步 进入 /usr/local/docker/redis 执行 docker-compose up -d 安装完毕
docker-compose Redis集群
不染心的博客
06-19 554
https://www.cnblogs.com/ruiyeclub/p/12355073.html 一、Redis相关 ​ ​ 1、Redis简介 Redis（Remote Dictionary Server )，即远程字典服务，是一种支持主从同步的ey-value存储系统存储系统。是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。 redis是一个key-value存储系统存储系统。它支持存储的va...
Docker Swarm 安装 Redis 集群(bitnami/redis-cluster:latest)
种一棵树最好的时间是十年前，其次是现在。
11-16 4493
准备集群环境：docker-79、docker-80、docker-81 拉取镜像： docker pull bitnami/redis-cluster:latest 3. 在任意文件夹下新建 compose.yml 脚本：redis_compose.yml 异常 SELECT is not allowed in cluster mode 打开连接，提示：SELECT is not allowed in cluster mode 这是因为redis在单机模式下redis.conf配置文件中默认的.
redis5.0.7---基于Docker集群搭建
池海
04-09 624
一、拉取redis镜像 此处略去几十个字 二、创建配置文件 案例创建的是最基础的3主3从形式，实际使用中自己灵活更改。我这里创建了6集文件夹分别存放不同节点配置文件 配置文件主要几点，看官网给出的最少选项的集群的配置文件: port bind cluster-enabled yes cluster-config-file nodes-7001.conf cluster-node-timeou...
Docker-swarm 快速搭建redis集群
GodOfRiver的博客
04-22 2804
Docker-swarm 搭建redis集群 环境配置 1.三台虚拟机，VM16 操作系统 IP 备注 centos7 192.168.2.131 centos7 192.168.2.132 centos7 192.168.2.133 2.redis配置 hostname IP 端口 备注 manager 192.168.2.131 7001 17001 manager 192.168.2.131 7002 17002 worker01 192
docker redis5.0 cluster集群搭建的实现
09-08
主要介绍了docker redis5.0 cluster集群搭建的实现,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
docker 实现redis集群搭建
08-19
"docker 实现redis集群搭建" 一、Redis Cluster 概念 Redis Cluster 是 Redis 的分布式解决方案，旨在解决 Redis 单机中心化的问题。它将整个数据集按照分区规则映射到多个节点上，使得 Redis 能够水平扩展以应对...
redis.zip docker swarm redis集群所需Docker以及docker-compose
09-06
docker-compose方式部署服务 需要解决的问题： 1、文件共享的问题 Machine主机跟docker虚拟主机之间通讯 挂载目录，只能被挂载一次，不能两台远程主机共享一个挂载目录 2、网络共享问题 端口开放 2377 集群管理端口，tcp入口 2376 tcp入口 7946 tcp/udp端口 节点间通讯 进出口允许 4789 tcp/udp 进出口允许 6379，16379 tcp入口 3、配置文件问题 需要一个配置文件的模板，不同的容器当中都能够去拥有这个模板 docker config create redis.conf redis.conf 配置文件名称 文件地址 docker stack deploy -c docker-compose.yaml redis-cluster
docker swarm搭建生产用redis集群
lms99251的博客
09-10 886
怕忘了，上代码留存 version: '3.7' services: redis-node-0: image: bitnami/redis-cluster:latest user: root volumes: - "/root/redisDatas/node0:/bitnami/redis/data" - "/etc/timezone:/etc/timezone:ro" - "/etc/localtime:/etc/localtime:ro"
Docker 搭建 Redis Cluster 集群
凝神遐想的博客
11-27 499
Redis 配置文件 根据需要自己可以定制 # bind 127.0.0.1 port ${PORT} protected-mode no cluster-enabled yes cluster-config-file nodes-${PORT}.conf cluster-node-timeout 5000 cluster-announce-ip 10.0.18.8 cluster-announce-port ${PORT} cluster-announce-bus-port 1${PORT} append
docker搭建RedisCluster集群
weixin_42880943的博客
03-01 244
由于rediscluster集群，数据是分片存储，所以一个节点挂掉，这个节点的数据就没有了。所以每个redis要配一个冗余节点。所以需要三主三从节点 安装Redis，配置RedisCluster集群 安装Redis镜像 # 必须是这个镜像 docker pull yyyyttttwwww/redis 创建net2网段 docker network create --subnet...
Docker搭建Redis Cluster集群
qq_41216025的博客
12-07 200
RedisCluster采用无中心结构，每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接。 Redis Cluster提供了一种运行Redis安装的方法，在该安装中，数据会 在多个Redis节点之间自动分片。Redis Cluster 在分区期间还提供了一定程度的可用性，这实际上是在某些节点出现故障或无法通信时继续操作的能力。但是，如果发生较大故障（例如，大多数主服务器不可用时），集群将停止运行。Redis Cluster自动分割在多个节点之间的数据集，一部分节点出现故障或无法与集群的其余部分
Docker构建redis cluster集群
这里将承载一段最初的记忆
01-24 293
Docker构建redis cluster集群 准备工作 安装gcc ruby 解压编译redis Redis 是 c 语言开发的。安装 redis 需要 c 语言的编译环境。如果没有 gcc 需要在线安装。 yum install gcc-c++ 使用yum命令安装 ruby （我们需要使用ruby脚本来实现集群搭建） yu...
Docker和Redis搭配进行Sentinel或Cluster使用的大坑
woluoyifan的博客
11-19 1654
docker默认是使用bridge的网络环境构建container 由于slave是基于对网络环境的检测来告知master自己的IP，类似地，sentinel是也是这样返回有效的master信息以及向其他sentinel广播自身位置，在docker环境中，这通常会导致slave和sentinel无法正常获取真实或有效的IP地址。 通常是类似如下 172.18.0.? 127.0.0.? ...
用docker stack开启redis集群
金庆的专栏
10-26 2661
用docker stack开启redis集群(金庆的专栏 2017.10)有5个docker swarm节点，开启redis cluster.每个机器上开2个redis节点，共10个redis节点。采用官方的redis:alpine镜像。docker-stack.yml 如下：version: "3"services:  redis001:    image: redis:alpine    vo
Redis 集群搭建（四）：Docker 部署 Redis + Cluster 分布式水平扩展高可用集群
乐之终曲
04-21 1169
Redis 集群搭建（四）：Docker 部署 Redis + Cluster 高可用集群前言官方译文cluster 的优点集群不可用情况部署新建模板生成虚拟网卡生成配置文件循环生成 Redis 容器串联生成集群Redis Cluster 命令新增节点增加配置添加节点重新切分集群删除节点移动槽删除节点SpringBoot 连接 Cluster相关资料 前言 目录： 我这里统一放在 /data/re...
Redis Cluster 高可用集群（Docker 实现）
热门推荐
矢落叶の博客
03-18 1万+
本文使用Docker部署实现于同一台服务器，Redis 版本 5.0.3 单机存在的问题 机器故障：导致Redis失效 容量瓶颈：容量不能水平扩展 OPS（ operation per second 每秒处理指令数）：一台及其的网络带宽是有限的，如果有多台机器，可以有效解决QOS Redis Cluster Redis 集群是一个可以在多个 Redis 节点之间进行数据共享的设施install...
Docker下Redis集群高效搭建与优势解析
Docker Redis 集群搭建是通过Docker容器技术构建一个高可用、高性能的分布式缓存系统。Redis本身就是一种键值存储数据库，其集群版本旨在解决单节点性能限制和数据冗余问题。在搭建过程中，我们需要注意以下关键步骤...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值