Centos通过Docker搭建Redis集群

最新推荐文章于 2024-05-16 12:55:37 发布
最新推荐文章于 2024-05-16 12:55:37 发布
阅读量611 收藏 3
点赞数 1
分类专栏： Linux 文章标签： docker redis linux centos 服务器
minroseven
本文链接：https://blog.csdn.net/m0_37893244/article/details/113740910
版权

Docker部署Redis集群

通过Docker搭建Redis集群

一、系统环境

  1. Redis version ：6.0.6
  2. Docker version 19.03.12 ；
  3. CentOS Linux release 7.7 ；

二、Redis 集群间通信机制

在 Redis 集群中，数据节点提供两个 TCP 端口，在配置防火墙时需要同时开启下面两类端口：

  • 普通端口： 即客户端访问端口，如默认的 6379；
  • 集群端口： 普通端口号加 10000，如 6379 的集群端口为 16379，用于集群节点之间的通讯；

集群的节点之间通讯采用 Gossip 协议，节点根据固定频率(每秒10次)定时任务进行判断，当集群状态发生变化，如增删节点、槽状态变更时，会通过节点间通讯同步集群状态，使集群收敛。集群间发送的 Gossip 消息有下面五种消息类型：

  • MEET： 在节点握手阶段，对新加入的节点发送 meet 消息，请求新节点加入当前集群，新节点收到消息会回复 pong 消息；
  • PING： 节点之间互相发送 ping 消息，收到消息的会回复 pong 消息。ping 消息内容包含本节点和其他节点的状态信息，以此达到状态同步；
  • PONG： pong 消息包含自身的状态数据，在接收到 ping 或 meet 消息时会回复 pong 消息，也会主动向集群广播 pong 消息；
  • FAIL： 当一个主节点判断另一个主节点进入 fail 状态时，会向集群广播这个消息，接收到的节点会保存该消息并对该 fail 节点做状态判断；
  • PUBLISH： 当节点收到 publish 命令时，会先执行命令，然后向集群广播 publish 消息，接收到消息的节点也会执行 publish 命令；

三、Redis 集群失败状态

在 Redis 集群模式下也不可能百分百保证集群可用性，当发生不可预知的事件导致 Redis 集群将进入失败状态，在这种状态下 Redis 集群将不能正常提供服务。其中进入失败状态的条件主要为：

  1. 全部节点都宕机，集群将进入 fail 状态
  2. 半数以上主节点不可用，集群将进入 fail 状态；
  3. 半数以上主节点不可用，集群将进入 fail 状态；

四、Redis 集群重新分片机制

Redis 集群重新分片（新增/移除节点）机制：

  • 新增节点：别的节点上的槽分一些出来给新的节点
  • 删除节点：删除节点的槽分给别的节点

但这些操作是需要手动完成的，可以在不停止服务器的情况下执行。

五、Redis 集群的不足

  1. 复制结构只支持单层结构，不支持树型结构。
  2. 不支持多数据库，只能使用 0 数据库，执行 select 0 命令；
  3. 键是数据分区的最小粒度，不能将一个很大的键值对映射到不同的节点；
  4. 键事务支持有限，当多个键分布在不同节点时无法使用事务，同一节点才能支持事务；
  5. 键的批量操作支持有限，比如 mset, mget 命令，如果多个键映射在不同的槽中，就不能正常使用这些命令了；

六、Redis 群集配置参数

我们即将创建一个示例集群部署。在继续之前，让我们介绍Redis Cluster在redis.conf文件中引入的配置参数。

  • cluster-config-file： 设置 Redis 集群配置信息及状态的存储位置，该文件由 Redis 集群生成，我们只能指定其存储的位置。
  • cluster-node-timeout： 设置 Redis 群集节点的通信的超时时间；
  • cluster-migration-barrier： 主节点需要的最小从节点数，只有达到这个数，主节点失败时，它从节点才会进行迁移。
  • cluster-enabled： 是否开启 Redis 集群模式。
    • yes：启用 Redis 群集；
    • no：不启用集群模式；
  • cluster-require-full-coverage： 设置集群可用性。
    • yes：表示当负责一个插槽的主库下线，且没有相应的从库进行故障恢复时，集群不可用，下面论证该情况。
    • no：表示当负责一个插槽的主库下线且没有相应的从库进行故障恢复时，集群仍然可用，下面论证该情况。
  • cluster-slave-validity-factor：
    • 0：则无论从节点与主节点失联多久，从节点都会尝试升级成主节点。
    • 正数：则 cluster-node-timeout * cluster-slave-validity-factor 得到的时间，是从节点与主节点失联后，此从节点数据有效的最长时间，超过这个时间，从节点不会启动故障迁移。假设 cluster-node-timeout=5，cluster-slave-validity-factor=10，则如果从节点跟主节点失联超过50秒，此从节点不能成为主节点。

七、Docker 部署 Redis 集群

1、Redis 部署机器分配

服务器IP端口数据存储位置
192.168.0.71-7000-/var/lib/redis/7000
192.168.0.71-7003-/var/lib/redis/7003
192.168.0.72-7001-/var/lib/redis/7001
192.168.0.72-7004-/var/lib/redis/7004
192.168.0.73-7002-/var/lib/redis/7002
192.168.0.73-7005-/var/lib/redis/7005

2、创建数据存储目录

提前创建好用于存储 Redis 的配置文件和持久化数据的目录：
第一台服务器 192.168.0.71 中执行创建存储目录命令：

mkdir -p /var/lib/redis/7000 & mkdir -p /var/lib/redis/7003

第二台服务器 192.168.0.72 中执行创建存储目录命令：

mkdir -p /var/lib/redis/7001 & mkdir -p /var/lib/redis/7004

第三台服务器 192.168.0.73 中执行创建存储目录命令：

mkdir -p /var/lib/redis/7002 & mkdir -p /var/lib/redis/7005

3、创建 Redis 配置文件

第一台服务器 192.168.0.71 配置文件：

## 7000 端口配置文件
$ cat > /var/lib/redis/7000/redis.conf << EOF
port 7000
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

## 7003 端口配置文件
$ cat > /var/lib/redis/7003/redis.conf << EOF
port 7003
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

第二台服务器 192.168.0.72 配置文件：

## 7001 端口配置：redis.conf
$ cat > /var/lib/redis/7001/redis.conf << EOF
port 7001
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

## 7004 端口配置：redis-7004.conf
$ cat > /var/lib/redis/7004/redis.conf << EOF
port 7004
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

第三台服务器 192.168.0.73 配置文件

## 7002 端口配置：redis-7002.conf
$ cat > /var/lib/redis/7002/redis.conf << EOF
port 7002
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

## 7005 端口配置：redis-7005.conf
$ cat > /var/lib/redis/7005/redis.conf << EOF
port 7005
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
daemonize no
protected-mode no
pidfile  /data/redis.pid
EOF

4、创建执行docker脚本

可以提前执行拉取redis镜像

docker pull redis:6.0.8

  • 第一台服务器 192.168.0.71 执行脚本

    redis7000.sh

    #! /bin/bash
docker stop redis-7000
docker rm redis-7000
docker run -d -v /var/lib/redis/7000:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7000 \
redis:6.0.8 redis-server /data/redis.conf

    redis7003.sh

    #! /bin/bash
docker stop redis-7003
docker rm redis-7003
docker run -d -v /var/lib/redis/7003:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7003 \
redis:6.0.8 redis-server /data/redis.conf

  • 第一台服务器 192.168.0.72 执行脚本
    redis7001.sh

    #! /bin/bash
docker stop redis-7001
docker rm redis-7001
docker run -d -v /var/lib/redis/7001:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7001 \
redis:6.0.8 redis-server /data/redis.conf

    redis7004.sh

    #! /bin/bash
docker stop redis-7004
docker rm redis-7004
docker run -d -v /var/lib/redis/7004:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7004 \
redis:6.0.8 redis-server /data/redis.conf

  • 第一台服务器 192.168.0.73 执行脚本
    redis7002.sh

    #! /bin/bash
docker stop redis-7002
docker rm redis-7002
docker run -d -v /var/lib/redis/7002:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7002 \
redis:6.0.8 redis-server /data/redis.conf

    redis7005.sh

    #! /bin/bash
docker stop redis-7005
docker rm redis-7005
docker run -d -v /var/lib/redis/7005:/data \
--cpus=1 --memory=2GB --memory-swap=0 \
--privileged=true \
--restart=always \
--net host \
--name redis-7005 \
redis:6.0.8 redis-server /data/redis.conf

参数介绍

  • -d：设置容器后台运行；
  • –name：指定运行后的容器名称；
  • –cpus：指定容器使用 CPU 数量；
  • –memory：限制容器使用内存数量；
  • –memory-swap：指定交换内存大小，这里设置为 0，即不用交换内存；
  • –net：指定 Docker 使用的网络模式；
  • -restart：指定 Docker 重启时容器的重启策略；
  • –privileged：设置容器拥有特权，能够获取宿主机 Root 权限；
    查看启动端口信息：
docker logs redis-7002 
##
docker logs redis-7005

在这里插入图片描述

5、创建redis集群

随意进入一台服务器，使用 Redis 镜像的 redis-cli 工具执行创建集群命令使各个 Redis 组成集群，这里本人进入第一台服务器 192.168.0.71 中，使用端口为 7000 的 Redis 端镜像，可以执行下面命令：

  • -p：指定连接 Redis 的端口；
  • create：创建 Redis 集群；
  • –cluster：使用 Redis 集群模式命令；
  • –cluster-replicas：指定副本数（slave 数量）；
docker exec -it redis-7000 \
redis-cli -p 7000 --cluster create \
192.168.0.71:7000 192.168.0.72:7001 192.168.0.73:7002 \
192.168.0.71:7003 192.168.0.72:7004 192.168.0.73:7005 \
--cluster-replicas 1

执行后会看到以下信息
在这里插入图片描述

6、查看集群信息

进入 Redis 镜像内部并折佣 redis-cli 命令：

  • -p：指定连接 Redis 的端点；
  • -c：使用集群模式；
    我这里连接的是第二台机器（随意那台）
 docker exec it redis-7001 redis-cli -p 7001 -c

查看集群信息：
在这里插入图片描述
查看集群节点信息：
在这里插入图片描述

7、集群连接使用测试

在这里插入图片描述
在这里插入图片描述

imeet77
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CentOS中使用Docker安装Redis
伍妖捌的小屋
06-06 298
下载redis镜像 docker pull redis # 不指定版本 默认选择latest版本 准备文件 mkdir -p /usr/local/redis/conf cd /usr/local/redis/conf touch redis.conf 创建Redis容器并启动 docker run -p 6379:6379 --name redis \ -v /usr/local/redis/data:/data \ -v /usr/local/redis/conf/redis.conf:/etc
基于docker搭建redis-sentinel集群的方法示例
09-09
总结来说，通过Docker搭建Redis-Sentinel集群可以简化部署过程，但需要注意网络配置和Sentinel的正确设置。这个方法使得即使在主节点故障的情况下，也能保证Redis服务的高可用性，从而提升系统的整体稳定性。在实际...
Centos 使用docker 搭建redis集群
weixin_41085315的博客
05-07 573
三步走： 第一步：安装依赖包下载 第二步：启动多个容器 第三步：创建集群 详细步骤： 1. 安装依赖包： 1. 安装docker：https://blog.csdn.net/u011936655/article/details/81062343 2. 下载reids镜像：docker pull redis 3. 下载ruby镜像：docker pull ruby 2. ...
CentOS7使用Docker安装Redis图文教程
最新发布
Mr_Richard的博客
05-16 1271
这里制定了版本，不指定默认latest最新版提示信息如下即为下载成功。
CentOS下Docker部署运行Redis
Danwich的博客
04-07 167
项目场景： 记录下centos下用docker部署redis 操作过程： 默认已安装docker 拉取redis镜像 docker pull redis 在宿主机创建redis数据和配置目录和容器内映射 sudo mkdir -p /MyPrograms/redis/data sudo mkdir -p /MyPrograms/redis/conf 在redis官网下载一份配置放入conf目录 修改下配置 bind 127.0.0.1 通过#注释掉，解除本地连接限制 protected-mode yes
CentOs 7 Docker+redis集群
非常暴躁的程序猿博客
09-10 1144
本文仅用于记录redis集群的搭建过程 1.关于redis集群的一些介绍 1.集群是如何判断是否有某个节点挂掉 每一个节点都存有这个集群所有主节点以及从节点的信息。它们之间通过互相的ping-pong判断是否节点可以连接上。如果有一半以上的节点去ping一个节点的时候没有回应，集群就认为这个节点宕机了，然后去连接它的备用节点，所以一个redis集群最少有3个master节点，而每个master节点...
linux centos7下docker redis5集群搭建，redis集群设置密码
IT小学生
04-19 1888
docker安装使用看这里：https://blog.csdn.net/u011477914/article/details/86591452 php连接redis集群 CodeIgniter(ci)框架redis5集群RedisClustert类使用，集群加密码调用：https://blog.csdn.net/u011477914/article/details/89418953 ...
使用docker搭建redis一主二从三哨兵集群
01-09
我使用的是阿里云的centos7服务器，好像centos必须要7版本以上才支持安装使用docker。不管是什么linux系统基本就几个简单的步骤：更新yum，然后直接用yum安装docker，然后启动docker，还可以设置为开机启动。如果...
docker 一键部署redis集群 shell脚本 适用centos7.x版本
06-01
docker 一键部署redis集群 shell脚本 适用centos7.x版本，按照说明 将参数传递给 安装脚本，自动执行部署程序，亲测可用
一次centos Docker网桥模式无法访问宿主机Redis服务的故障排除经历
01-20
② 网桥网络（docker run --network=bridge）: 这也是docker容器默认的网络通信模式，容器内localhost 指向的是容器自身，不能使用 localhost 访问宿主机上localhost:6379承载的Redis服务 。 docker会默认建立...
Redis集群搭建
01-20
Redis集群搭建 在Centos7.5上多台宿主机使用docker部署redis集群的过程，redis集群一般需要6台redis服务器,使用docker可以节省服务器资源，除开放主从6379和6380端口外还得开放集群总线端口，集群总线端口为redis...
CentOS使用docker-compose安装redis
Peter Cheung的博客
08-15 1386
讲述如何在Linux环境下使用docker-compose安装redis。
centos7环境下在docker中部署redis
weixin_44949177的博客
08-03 275
1.拉取redis镜像 这里拉取的是最新的redis镜像 docker pull redis 2.启动redis容器 因为容器内部只有/etc/redis 这个目录并没有redis.conf 所以要先创建出来 mkdir -p /mydata/redis/conf touch /mydata/redis/conf/redis.conf 启动容器 docker run -p 6379:6379 --name redis\ -v /mydata/redis/data:/data\ -v /mydata/
Centos下使用docker搭建redis-cluster集群
山里人的博客
02-08 358
Centos下使用docker搭建redis-cluster模式 直接拉取最新版本的redis docker pull redis 查看redis是否拉取成功 docker images | grep "redis" 建立用来存放docker中的redis的配置文件和数据的目录及文件，编辑一个redis集群的模板配置文件 cd ~ #切换到当前用户目录空间 pwd mkdir redis cd redis vi redis-cluster.tmpl #编辑redis集群的模板配置文件 redis-cl
Centos7中Docker安装Redis
shareloke
07-29 1223
一、查询Redis镜像 docker search redis 也可以去docker仓库地址搜索https://hub.docker.com/search 二、拉取Redis镜像 # 拉取最后的版本 docker pull redis # 拉取指定版本 docker pull redis:6.2.5 三、查看镜像 docker images 四、创建Redis容器并设置密码 docker run -d --name redis -p 6378:6379 r...
Docker：Centos 安装Redis
RickyIT的专栏
05-31 2005
想研究一下Redis，感觉利用docker部署redis很方便，还能快速实现集群部署。Redis For Widows也有，不太喜欢在Windows部署服务。所以研究一下怎么利用Docker来部署Redis。
docker redis集群搭建_centos7搭建redis集群
weixin_39924179的博客
11-26 71
Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器，因为值(value)可以是字符串(String), 哈希(Hash), 列表(list), 集合(sets)和有序集合(sorted sets)等类型。-redis作用:可以减轻数据库压力，查询内存比查...
centos7 docker部署redis集群
zrxzqqqq的博客
12-30 221
docker部署redis集群
Docker容器--部署Redis集群
Johnyangyuan的博客
05-21 272
RedisRedis集群部署实战拓扑图：部署步骤： Redis集群部署实战 拓扑图： 部署步骤： 1.准备一台干净的docker，或者清空之前所有的容器 docker rm -f $(docker ps -qa) 2.创建redis集群自定义网络。 docker network create --subnet 172.38.0.0/16 --gateway 172.38.0.1 redis docker network ls NETWORK ID NAME DRIVER SCO
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值