10_36_Docker【实战】—Redis集群部署实战【部署方式采用：分片+高可用+负载均衡】

已于 2022-05-20 10:29:48 修改
阅读量2.4k 收藏 1
点赞数 2
分类专栏： 笔记 文章标签： docker redis
于 2022-03-23 10:33:25 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40572023/article/details/123654226
版权

Redis集群部署实战

部署方式采用：分片+高可用+负载均衡

在这里插入图片描述

  • 三个主机，三个从机（用来做备份）
  • 当主机挂了，对应得从机就要替代原来得主机

Redis是一个单独的集群——集群，我们就要建立自己的网卡（Redis的网卡）

# 创建网卡【步骤一】
docker network create redis --subnet 172.38.0.0/16

### 过程：
可以先将原有容器都删除来进行测试（可选）
docker rm -f $(docker ps -aq)

执行命令后查看网络中是否有我们创建好的redis服务了
docker network ls

在这里插入图片描述

### 过程：
也可以查看网络的具体信息
docker network inspect redis
	就可以看到我们自己分配的网络，低下是没有一个网络的

在这里插入图片描述

redis要写配置文件，我们用脚本一次性写好配置文件

  • 启动六个容器很慢——使用shell脚本快速创建，通过脚本创建六个redis配置
# 通过脚本创建六个redis配置
for port in $(seq 1 6); \
do \
mkdir -p /mydata/redis/node-${port}/conf
touch /mydata/redis/node-${port}/conf/redis.conf
cat << EOF >/mydata/redis/node-${port}/conf/redis.conf
port 6379
bind 0.0.0.0
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 172.38.0.1${port}
cluster-announce-port 6379
cluster-announce-bus-port 16379
appendonly yes
EOF
done

### 解释：

在这里插入图片描述

测试结果：

在这里插入图片描述

redis配置好后，需要去一个一个启动

# 一个一个开启服务【容器】
docker run -p 6371:6379 -p 16371:16379 --name redis-1 \
-v /mydata/redis/node-1/data:/data \
-v /mydata/redis/node-1/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.11 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

### 解释
-p 6371:6379
	两个端口号做映射
	6371是外部访问
--name redis-1
	命名为 redis-1
--net redis
	网络使用我们redis的网络
-d
	后台运行
--ip 172.38.0.11
	绑定的ip号
redis:5.0.9-alpine3.11
	使用的redis版本
	如果没有这个镜像，运行命令会自动下载【注意】
redis-server /etc/redis/redis.conf
	通过redis.conf来启动

在这里插入图片描述

# 测试服务是否启动了
docker ps

在这里插入图片描述

# 同理，我们将其余的都开启
#启动：redis-2服务
docker run -p 6372:6379 -p 16372:16379 --name redis-2 \
-v /mydata/redis/node-2/data:/data \
-v /mydata/redis/node-2/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.12 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

### 解释：
容器外的6372映射到容器内的6379【容器内不变】

#启动：redis-3服务
docker run -p 6373:6379 -p 16373:16379 --name redis-3 \
-v /mydata/redis/node-3/data:/data \
-v /mydata/redis/node-3/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.13 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

#启动：redis-4服务
docker run -p 6374:6379 -p 16374:16379 --name redis-4 \
-v /mydata/redis/node-4/data:/data \
-v /mydata/redis/node-4/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.14 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

#启动：redis-5服务
docker run -p 6375:6379 -p 16375:16379 --name redis-5 \
-v /mydata/redis/node-5/data:/data \
-v /mydata/redis/node-5/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.15 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

#启动：redis-6服务
docker run -p 6376:6379 -p 16376:16379 --name redis-6 \
-v /mydata/redis/node-6/data:/data \
-v /mydata/redis/node-6/conf/redis.conf:/etc/redis/redis.conf \
-d --net redis --ip 172.38.0.16 redis:5.0.9-alpine3.11 redis-server /etc/redis/redis.conf

# 测试服务是否启动了
docker ps

在这里插入图片描述

开始创建集群了

我们先随便进入一个容器(redis-1)

# 进入redis-1容器
docker exec -it redis-1 /bin/sh

### 注意：
	redis中没有 /bin/bash 命令，所以用的是 /bin/sh命令【效果是一样的】
	进入后默认的pwd是 /data目录
	

### 查看一下/data目录下：
	appendonly.aof：aof配置——持久化
	nodes.conf：节点配置

在这里插入图片描述

连接集群的配置

# 这时候我们就在/data目录下创建我们的集群
/data # redis-cli --cluster create 172.38.0.11:6379 172.38.0.12:6379 172.38.0.13:6379 172.38.0.14:6379 172.38.0.15:6379 172.38.0.16:6379 --cluster-replicas 1

### 解释：
/data # 	：进入redis-1容器的目录
redis-cli	：用来连接
--cluster	：通过什么方式连接【-集群的方式】
create		：集群就需要创建
需要写端口号，不然连接不上
--cluster-replicas 1	：集群的切片

在这里插入图片描述

# 连接集群的配置文件内容

/data # redis-cli --cluster create 172.38.0.11:6379 172.38.0.12:6379 172.38.0.13:6379 172.38
.0.14:6379 172.38.0.15:6379 172.38.0.16:6379 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 172.38.0.15:6379 to 172.38.0.11:6379
Adding replica 172.38.0.16:6379 to 172.38.0.12:6379
Adding replica 172.38.0.14:6379 to 172.38.0.13:6379
M: 163c0747779d2f629f5e9d236dce80740bd7c747 172.38.0.11:6379
   slots:[0-5460] (5461 slots) master
M: 8be0dbf6887f9abd03c81630a292993624316a08 172.38.0.12:6379
   slots:[5461-10922] (5462 slots) master
M: d48856d8dcdec93017c14c4a6a03ab2ee4cd53d6 172.38.0.13:6379
   slots:[10923-16383] (5461 slots) master
S: 9c45a8c19173f82fd170f4b52b4e18e2b4942dc1 172.38.0.14:6379
   replicates d48856d8dcdec93017c14c4a6a03ab2ee4cd53d6
S: 698fb424a8f2ce3246f8f684001b16f4c3526039 172.38.0.15:6379
   replicates 163c0747779d2f629f5e9d236dce80740bd7c747
S: e9f3295c0cd99747e5df6eb53e5b74adaf43d41f 172.38.0.16:6379
   replicates 8be0dbf6887f9abd03c81630a292993624316a08
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
...
>>> Performing Cluster Check (using node 172.38.0.11:6379)
M: 163c0747779d2f629f5e9d236dce80740bd7c747 172.38.0.11:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 9c45a8c19173f82fd170f4b52b4e18e2b4942dc1 172.38.0.14:6379
   slots: (0 slots) slave
   replicates d48856d8dcdec93017c14c4a6a03ab2ee4cd53d6
S: e9f3295c0cd99747e5df6eb53e5b74adaf43d41f 172.38.0.16:6379
   slots: (0 slots) slave
   replicates 8be0dbf6887f9abd03c81630a292993624316a08
M: d48856d8dcdec93017c14c4a6a03ab2ee4cd53d6 172.38.0.13:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
M: 8be0dbf6887f9abd03c81630a292993624316a08 172.38.0.12:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 698fb424a8f2ce3246f8f684001b16f4c3526039 172.38.0.15:6379
   slots: (0 slots) slave
   replicates 163c0747779d2f629f5e9d236dce80740bd7c747
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

测试是否搭建成功

/data # redis-cli -c

### 解释：
/data #	：进入redis-1容器的目录
redis-cli	：光这个连接的是单机
redis-cli -c	：加上连接的是集群

127.0.0.1:6379> cluster info

### 解释：
查看集群信息

在这里插入图片描述

127.0.0.1:6379> cluster nodes

### 解释：
查看集群节点

在这里插入图片描述

# 测试，set一个值，看容器中是否有值分配
127.0.0.1:6379> set a b

在这里插入图片描述

# 所以按照集群概念，当第三个主机挂了，他的从机也会存有相应的值——【体现了高可用】

# 测试，将第三个主机（redis-3）停掉后，看从机是否还存有相应的值
## 1、先从开一个窗口，然后将redis-3停掉

在这里插入图片描述

## 2、这时候进入一个容器然后get一下a，看能否得到对应的值
	* 但是不能进入停止的主机中去get，这样无效
127.0.0.1:6379> get a
### 注：如果以前主机停了就没有值了，但是现在集群主机停了，从机判断之后会自动替代主机

在这里插入图片描述

127.0.0.1:6379> cluster nodes

### 解释：
查看集群节点

在这里插入图片描述

小结

使用docker搭建redis集群完成
我们使用了docker技术之后，所有技术都会慢慢的变得简单起来！

狂野小白兔
关注
专栏目录
高可用高负载高并发的互联网应用的架构设计
AI架构设计之禅
07-17 955
在当今数字化时代，互联网应用已经成为我们日常生活中不可或缺的一部分。随着用户数量的激增和业务需求的不断扩大，构建高可用、高负载、高并发的互联网应用架构已经成为现代软件工程中的一个重要挑战。本文将深入探讨如何设计和实现一个能够满足这些要求的互联网应用架构，从而为读者提供一个全面的技术指南。高可用性（High Availability）指的是系统能够持续运行并提供服务的能力，即使在面对各种故障和异常情况时也能保持稳定运行。
Docker 搭建redis集群【分片+高可用+负载均衡】（3）
zkzhuai的专栏
03-26 368
1、创建一个名称为casonet的自定义网络 docker network create --driver bridge --subnet 172.18.0.0/16 --gateway 172.18.0.1 casonet 2、下载redis镜像 docker pull redis 3、创建6个conf文件，脚本快速创建 [root@localhost redisfile]# #脚本循环六次创建conf文件 #自定义/casocloud/redis目录 for port in $(seq 1 6); \
Docker下搭建Redis分片集群
mah888的博客
11-14 1667
分片集群结构 主从和哨兵可以借鉴高可用，高并发读的问题。但是依然有两个问题没有解决： 1. 海量数据存储问题 2. 高并发写的问题 使用分片集群可以很好的解决以上2个问题，分片集群的特征如下： 1. 集群中有多个master，每个master保存不同的数据 2. 每个master主节点都可以有多个slave从节点 3. master直接通过ping来感知彼此的健康状态 4. 客户端的访问都可以转发到任意节点，最终转发到正确的节点。 ![在这里插入图片描述](https://img-blog.csdni
docker搭建redis集群高可用分片
郝开的博客
01-23 1466
docker搭建redis集群高可用分片创建redis集群的网卡编写shell脚本，创建redis集群卷本机目录启动6个reddis容器docker run启动6个容器(后面有脚本，可以爱创建目录时同时启动)容器秒退错误信息查看进入其中一个容器配置redis分片集群redis-cli -c在容器内查看集群主从关系高可用测试插入值删除操作节点查看集群节点状态，并获取值查看本机挂载目录shell脚本执行创建数据卷目录及运行6容器 创建redis集群的网卡 docker network create redis
docker部署redis-cluster(数据分片)
旺旺的博客
01-02 591
目录前言redis-cluster的概念docker部署redis-cluster1、docker-compose安装2、编写docker-compose.yml文件3、创建六个容器docker部署redis-cluster后测试1、安装一个redis-cli客户端2、进入测试后记 前言 本次就是通过搭建redis-cluster来优化整个项目的运行速度和数据安全 在网上找了比较多的搭建方式，但是...
【Docker部署Redis集群】分片+高可用+负载均衡
07-30 436
一、搭建架构 1.1 准备工作 6台Redis 1.2 创建网卡 docker network create redis --subnet 172.38.0.0/16 docker network docker network inspect redis 1.3 创建redis的6个配置文件 for port in $(seq 1 6); \ do \ mkdir -p /mydata/redis/node-${port}/conf touch /mydata/redis/node-${port}/c
集群系列：Redis集群方案及新版实战
2301_76607156的博客
04-28 399
主从复制模式是三种模式中最简单的一种，多台Redis实例，以一台实例作为主机，其余的实例作为备份机，主机和从机的数据完全一致，主从复制提高了Redis读请求的吞吐量主机支持数据的读和写操作，而从机只支持读和数据同步，客户端将数据写入主机后，由主机自动的将数据写入到从机中在Redis中主从复制的同步策略有两种全量更新：复制主机所有数据到从机增量更新：仅复制主机与从机差异数据到从机。
构建JAVA大型分布式电商项目实战高并发集群分布式系统架构PDF+视频.rar
07-26
本项目实战教程涵盖了高并发、集群以及分布式系统架构等关键知识点，旨在帮助Java架构师提升技能，实现高性能、高可用和可扩展的电商系统。 1. **Java基础与高级特性** - Java的基础语法、面向对象编程、异常处理...
docker 入门到实战
凌云的专栏
03-22 1551
docker 入门到实战
这次一定要教会你搭建Redis集群和MySQL主从同步(非Docker)
Java笔记虾
11-08 1648
前言 一直都想自己动手搭建一个Redis集群和MySQL的主从同步，当然不是依靠Docker的一键部署（虽然现在企业开发用的最多的是这种方式），所以本文就算是一个教程类文章吧，但在动手搭建之前，会先聊聊理论的东西，以便于大家有一个集群和主从同步的概念，如果有同学不了解Redis和MySQL，可以看一下我之前的两篇文章。 Redis由浅入深深深深深剖析 从入门到入土：令人脱发的数据库底层设计...
Nginx+Tomcat+Redis搭建高性能负载均衡集群Session共享
11-10
超详细Nginx+Tomcat+Redis搭建高性能负载均衡集群Session共享搭建说明，按文档步骤可轻松搭建并实现session共享
Docker + Django + Redis 简单的负载均衡
cow66的博客
04-26 1116
实验环境 宿主机：Ubuntu-16.04_X64 Docker version 18.03.0-ce 前期准备 我们将搭建一个包含6个节点的Docker应用栈，其中包括一个负载均衡代理节点、两个Web应用节点、一个主数据库节点及两个从数据库节点。 获取镜像： # 获取Django镜像 $ sudo docker pull django # 获取HAProxy镜像 $ sud...
redis集群
sddh1988的博客
05-02 744
在redis3.0之前，采用哨兵机制来保证高可用。哨兵存在一些问题，比如master挂掉后，哨兵不是立即切换，中间需要一个时间来确认master是不是挂掉了。这个时间内会写入数据失败。在redis3.0之后，出现了集群的概念。很好的解决了哨兵的不足。redis集群需要3个master。如果没有那么多机器的话，那么在一台机器上面启动几个redis实例也是可以的。不过每个机器都要对应一个redis.co
docker部署redis/mysql
python_web全栈
02-17 2568
1. mysql docker run -di --name=ly_mysql -p 8765:3306 -e MYSQL_ROOT_PASSWORD=foobared mysql_utf8 2. redis mkdir /redis /redis/conf /redis/data vim /redis/conf/redis.conf bind 0.0.0.0 daemonize NO protected-mode no requirepass foobared docker r
基于CentOS的Docker容器化部署（三）—— 安装redis和mysql
昨夜丶雨疏风骤的博客
04-23 346
本系列的前提是你已经看完了《基于.NET6平台开发WebApi》系列文章。如果您还没看完可以直接拉取代码 >>首先我们设置一下docker的镜像地址到国内，这样安装的速度比较快。1、接下来我们通过docker部署redis和mysql服务。在文件夹下创建daemon.json文件，输入以下内容并保存。到此，我们的redis和mysql服务已经安装完成。将protected-mode no #设置为no。至此，我们的redis服务已经启动完成。我们打开redis.conf。接下来重启docker。
Redis负载均衡部署
互联网知识分享
07-21 1886
常见的负载均衡方式有软件负载均衡和硬件负载均衡，这里我们以软件负载均衡为例来详细介绍。负载均衡算法：选择适合自己业务场景的负载均衡算法，常见的有轮询、随机、哈希、加权轮询和加权随机。节点健康检查：定期检查节点的健康状态，如果节点不可用，则将请求分发给其他可用的节点。集群搭建和负载均衡的理论解释，以及具体的代码实现，读者可以了解到如何在实际项目中部署。集群中，有时需要通过负载均衡来平衡每个节点的负载，以提高性能和可靠性。通过以上步骤，负载均衡器可以平衡各个节点的负载，并提供高可用和性能。负载均衡的示例代码。
Redis集群的负载如何计算浅谈
最新发布
IT深耕十余载，大道之简
02-12 533
当需要存储或查找数据时，通过计算数据的哈希值，并在环上顺时针查找遇到的第一个节点，即为目标节点。需要注意的是，实际的负载计算还涉及到其他因素，如节点的硬件配置、网络状况、数据访问模式等。哈希槽分配：Redis集群使用哈希槽的方式将数据进行分片。加权轮询（Weighted Round Robin）：根据节点的性能或资源使用情况为每个节点分配一个权重，权重越高的节点接收的请求越多。最少连接（Least Connections）：记录每个Redis节点当前正在处理的连接数，并将新的请求转发到连接数最少的节点。
【最全最详细Docker】用docker部署mysql、tomcat、nginx、redis 环境部署
wufaqidong1的博客
07-27 1508
这是因为我们使用到了目录挂载，本地的目录/usr/local/webapps是新创建的，没有任何应用，所以访问时无显示。需要注意在tomcat部署过程当中，如部署后无法正常访问，报错404，这说明tomcat服务是没问题的。找到配置文件default.conf，可以看到nginx的页面文件是保存于/usr/share/nginx/html/中的；-v目录映射关系，前者为宿主机目录，后者是映射到宿主机上的目录，如果没有该目录会自动创建。所以我们将需要部署的页面文件移动到此目录；...
docker-compose部署mysql+redis+sentinel1主2从+rabbitmq+nginx负载均衡
weixin_42378237的博客
03-18 448
中间件部署 1、下载 链接：http://pan.dhcc.cloud 用户名密码 用户名:aml 密码:12345678a 文件地址 链接：http://pan.dhcc.cloud/share/detail/941186b9-173a-4369-48a4-2dd0955df4fb 提取码：gdvn 2、安装docker 2.1、安装安装-docker依赖 选择合适版本的docker安装包将安装文件（docker-install.tar.gz）上传至上文提到的docker安装包存放路径…/aml/tar目
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

狂野小白兔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值