学习笔记：Linux、Docker单机搭建redis集群

最新推荐文章于 2024-07-18 20:49:26 发布
最新推荐文章于 2024-07-18 20:49:26 发布
阅读量145 收藏 1
点赞数
文章标签： redis java docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_24258617/article/details/107793746
版权

1.文章说明

  1. 个人学习linux下单机redis伪集群，如有不足请多指教。
  2. 环境： linux centos7.8，docker-ce-18.06.3.ce，redis 6.0.6，gcc devtoolset 9等。
  3. redis多节点有三种，最小运行为：主从模式（一主一从）、哨兵模式（一哨兵一主两从）、集群模式（三主三从）。
  4. 本次学习搭建了三种集群模式（三主三从）。

2.环境准备

  1. 系统准备，使用了VMware建立linux虚拟机，使用centos7镜像。（准备两台虚拟机，一台用来编译源码测试，一台用来装docker，我的两台虚拟机IP 192.168.1.108 192.168.1.110）

    #虚拟机及系统安装自行学习
#学习的时候完全关闭防火墙，生成环境谨慎使用
#防火墙状态
systemctl status firewalld
#关闭防火墙
systemctl stop firewalld
#关闭防火墙服务
systemctl disable firewalld

  2. 安装docker（虚拟机IP 192.168.1.110）。

    #docker的详细配置大家自行学习。
#安装docker社区版
yum install docker-ce-18.06.3.ce

#启动、自启
systemctl start docker
systemctl enable docker

  3. 安装gcc，用于编译redis源码（虚拟机IP 192.168.1.108）。

    #安装gcc
yum install gcc

# 升级gcc
yum -y install centos-release-scl
yum -y install devtoolset-9-gcc devtoolset-9-gcc-c++ devtoolset-9-binutils

#启用devtoolset-9
scl enable devtoolset-9 bash

#设置系统默认
echo "source /opt/rh/devtoolset-9/enable" >>/etc/profile

  4. 下载redis源码及编译等（虚拟机IP 192.168.1.108）。redis官方下载地址

    #在linux根路径新建文件夹
mkdir /redis

#如果没有安装wget
yum install wget -y

#下载redis源码到新建文件夹
wget http://download.redis.io/releases/redis-6.0.6.tar.gz

#解压redis源码
tar -zxvf redis-6.0.6.tar.gz

#进入源码文件夹
cd redis-6.0.6

#编译redis源码，等待编译完成
make

    此工作主要是为了得到一个可以独立运行的redis-cli，在 /redis/redis-6.0.6/src 下：
    在这里插入图片描述

  5. 编辑（/redis/redis-6.0.6/redis.conf）文件。为了简单（偷懒）所有的redis都将使用这个配置文件。

    #编辑/redis/reids-6.0.6/redis.conf
#我使用的是vim，原linux是没有vim的，可以自行安装或者使用vi
vim redis.conf

    在这里插入图片描述
    注释掉bind 127.0.0.1，并添加 protected-mode no（关闭保护模式）

    ################################## NETWORK #####################################

#By default, if no "bind" configuration directive is specified, Redis listens
#for connections from all the network interfaces available on the server.
#It is possible to listen to just one or multiple selected interfaces using
#the "bind" configuration directive, followed by one or more IP addresses.
#
#Examples:
#
#bind 127.0.0.1 ::1
protected-mode no

    打开集群设置

    ################################## INCLUDES ###################################

#Normal Redis instances can't be part of a Redis Cluster; only nodes that are
#started as cluster nodes can. In order to start a Redis instance as a
#cluster node enable the cluster support uncommenting the following:
#
cluster-enabled yes

#Every cluster node has a cluster configuration file. This file is not
#intended to be edited by hand. It is created and updated by Redis nodes.
#Every Redis Cluster node requires a different cluster configuration file.
#Make sure that instances running in the same system do not have
#overlapping cluster configuration file names.
#
cluster-config-file nodes-6379.conf

#Cluster node timeout is the amount of milliseconds a node must be unreachable
#for it to be considered in failure state.
#Most other internal time limits are multiple of the node timeout.
#
cluster-node-timeout 15000

  6. 新建文件夹（按照个人习惯新建）
    在192.168.1.110根目录新建redis文件夹统一存放，从192.168.1.108拷贝redis.conf。

    scp redis.conf root@192.168.1.110:/redis

    在192.168.1.110的redis文件夹下新建datas，并创建端口对应的文件夹

    cd /redis
mkdir datas
cd datas
mkdir 6379 6380 6381 6382 6383 6384

3.Docker安装多节点redis

  1. docker下载redis（虚拟机IP192.168.1.110）

    #下载redis
docker pull redis:6.0.6

    在这里插入图片描述
    这里是下载的reids镜像，后面要使用IMAGE ID

  2. 启动redis节点

    #启动第一个节点
docker run -itd --privileged=true -p 6379:6379 -p 16379:16379 --name redis_6379 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6379:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

#启动第二个节点
docker run -itd --privileged=true -p 6380:6379 -p 16380:16379 --name redis_6380 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6380:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

#启动第三个节点
docker run -itd --privileged=true -p 6381:6379 -p 16381:16379 --name redis_6381 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6381:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

#启动第四个节点
docker run -itd --privileged=true -p 6382:6379 -p 16382:16379 --name redis_6382 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6382:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

#启动第五个节点
docker run -itd --privileged=true -p 6383:6379 -p 16383:16379 --name redis_6383 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6383:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

#启动第六个节点
docker run -itd --privileged=true -p 6384:6379 -p 16384:16379 --name redis_6384 -v /redis/redis.conf:/etc/redis/redis.conf -v /redis/datas/6384:/data {下载的IMAGE ID} redis-server /etc/redis/redis.conf

    在这里插入图片描述

  3. 查看宿主机和容器IP

    #docker inspect {各个redis容器ID} | grep IPAddress
docker inspect 7f6d209fe257 966b8ed724ce 75ff0495e6ec ff854f1832d9 25c27e97b5b1 ae7a2f763e8c | grep IPAddress

    在这里插入图片描述

宿主机IP容器内IP
192.168.1.110:6379172.17.0.2
192.168.1.110:6380172.17.0.3
192.168.1.110:6381172.17.0.4
192.168.1.110:6382172.17.0.5
192.168.1.110:6383172.17.0.6
192.168.1.110:6384172.17.0.7

  1. 添加集群节点
    进入其中一个容器

    docker exec -it ae7a2f763e8c bash
cd /usr/local/bin/

    在这里插入图片描述
    执行如下命令

    # --cluster-replicas 参数为数字，1表示每个主节点需要1个从节点。
./redis-cli --cluster create 172.17.0.2:6379 172.17.0.3:6379 172.17.0.4:6379 172.17.0.5:6379 172.17.0.6:6379 172.17.0.7:6379 --cluster-replicas 1

    产生问题（未解决）

    # 在 192.168.1.110和192.168.1.108容器内外的redis-cli都测试过
# 不成功！一直等待 Waiting for the cluster to join 很久都没有反应
./redis-cli --cluster create 192.168.1.110:6379 192.168.1.110:6380 192.168.1.110:6381 192.168.1.110:6382 192.168.1.110:6383 192.168.1.110:6384 --cluster-replicas 1

    在这里插入图片描述

  2. 此时查看集群状态

    # 连接集群
./redis-cli -c
# 输入
cluster info

    在这里插入图片描述

  3. 主从复制（三主三从）

    # 输入
cluster nodes

    在这里插入图片描述

4.主备测试

  1. 停止6370节点

    docker stop redis_6384
# 查看所有容器
docker ps -a

    在这里插入图片描述

  2. 查看redis集群

    #在  /redis/redis-6.0.6/src 下 使用
./redis-cli -p 6380
#输入cluster nodes查看节点ID
cluster nodes

    主节点自动降备，且slave失败，它之前的从节点自动升为主节点
    重新启动6379，节点恢复正常，且主备互换    在这里插入图片描述
    在这里插入图片描述

5.本地客户端读写测试

  1. 客户端连接（虚拟机IP192.168.1.110）容器内redis-cli
    在这里插入图片描述
    登录没有启动集群模式(命令缺少"-c"):
    在这里插入图片描述

  2. 增删改查
    在这里插入图片描述

  3. 集群同步测试
    在这里插入图片描述

6.远程客户端测试（有问题）

  1. 虚拟机IP 192.168.1.108连接192.168.1.110上docker，使用源码编译后的redis-cli
    在这里插入图片描述

    说明：从上图出现连接超时，看出192.168.1.108不能访问192.168.1.110中docker中的redis集群

  2. 虚拟机IP192.168.1.110编译redis源码，容器外redis-cli
    在这里插入图片描述
    说明：从上图192.168.1.110中容器外redis-cli可以连接docker中的redis集群

  3. 产生的问题 （另一个虚拟机为什么不能访问redis集群）
    docker有4种网络模式

    网络模式配置说明
    host–net=host容器和宿主机共享Network namespace。
    container–net=container:NAME_or_ID容器和另外一个容器共享Network namespace。 kubernetes中的pod就是多个容器共享一个Network namespace。
    none–net=none容器有独立的Network namespace，但并没有对其进行任何网络设置，如分配veth pair 和网桥连接，配置IP等。
    bridge–net=bridge容器和宿主机有各自独立的网段

    个人猜测：192.168.1.110可以通过自身网卡docker0的虚拟网桥找到docker中的其他网卡，而192.168.1.108访问192.168.1.110物理网卡，并且redis集群是docker内loopback的，所以不能，如果想要访问通过设置docker网络模式（有待验证）。

    下一步尝试三台虚拟机直接启动6节点，是否能够达到进一步伪集群。

找个昵称好难
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
学习笔记 Linux下用Docker创建Redis Cluster集群
weixin_52572040的博客
08-25 1138
Redis Cluster集群是Redis实现高可用的一种方式
Learning-Notes:学习笔记
05-25
学习笔记 后端开发 Java maven netty Redis Spring Spring4新特性 Spring使用注意事项 Spring验证Validation SpringBoot 开发知识 相关技术名词 开发技术框架工具整理 架构知识 开发过程注意事项整理 常用开发技巧 ...
linux平台使用docker搭建redis-cluster集群，并用JedisCluster连接集群
备忘录
08-13 391
创建六个节点，三个master+三个slave，每个master有自己的slave。 以redis_6381为例，conf修改： #bind 127.0.0.1 -::1 (注释掉) protected-mode no port 6381 daemonize no （非守护运行，否则与docker run 冲突） #pidfile /var/run/redis_6381.pid （注释掉，当服务器非守护运行时，如果没有创建pid文件，则不会创建pid文件） logfile /redis/redis_638
linux下使用Docker作为容器搭建Redis集群
nelson的博客
01-04 1347
我这里是在同一台宿主机上搭建的，宿主机用的是阿里云的服务器。 一、编写一个redis-cluster.tmpl文件 下载一个redis，我下载的版本是5.0.5的，复制里面的redis.conf文件，将它重命名为redis-cluster.tmpl，为了看起来简洁，我删掉了里面的注释部分。 #bind 127.0.0.1 protected-mode no port ${PORT} tcp...
docker模拟linux集群,Docker从零到集群(1/3)—Machine,Compose,Swarm
weixin_29981095的博客
05-14 372
前言Docker，容器，看似迷你微小的身躯，却是蕴含着庞大的智慧。它的出现去除了复杂的配置，改变了繁琐的运维，解放了冗余的环境，让大规模的高扩展，高可用的集群部署成为一件并不复杂的事情。这一篇文章，会尽可能用简单易懂的叙述和快速便捷的操作讲解从编写代码到将其部署在一个可随意扩展的集群上。国内相关的资料实在是太少了，许多的构建指南和教程不是太老就是不完整，初学者很难以入门，尤其是swarm的集群部分...
linux配置部署redis集群（虚拟机、docker）
释玉的博客
01-27 2129
Redis集群搭建 搭建环境 c语言的编译环境。需要在线安装gcc、tcl等。 yum install gcc –y、yum install tcl -y 2.使用ruby（5.x以上版本不用） 脚本搭建集群，需要ruby的运行环境。yum installruby yum installrubygems geminstallredis（5.x以后不用ruby） 安装ruby脚本运行所需的依赖包redis-3.0.0.gem。gem install redis-.3.0...
动力节点Docker入门到进阶教程学习笔记分享
07-18
本套课程适合零基础、技术提升乃至所有编程语言开发者；...8.全面详细的讲解了Docker中MySQL“一主两从”的读写分离主从集群搭建过程，Redis的“一主两从”的主从集群搭建、“一主两从三哨兵”的高可用集群搭建，及
spring-boot-study:spring boot note--我自己的学习笔记，还有一些demo。包含docker、攻击技术、设计模式、安全通讯、redis集群等。还有一些mq的使用、aop日志、批量操作sql等
05-14
redis lettuce swagger2 项目结构： spring-boot-study 父项目 web web项目继承自spring-boot-study api 接口统一定义，model统一定义 common 公共模块 controller 控制器 dao 数据访问层 service 服务层 #启动项目...
谷粒商城完整版笔记pdf
10-04
6. **模拟生产环境**：使用Docker和Kubernetes模拟真实部署，学习集群管理和故障排查。 通过以上步骤，你可以从这份"谷粒商城完整版笔记PDF"中收获丰富的知识和实践经验，对微服务架构有更深入的理解，提升自己的IT...
Java后端学习笔记代码Java后端学习笔记代码
10-18
学习Docker容器化和Kubernetes集群管理是实现微服务的关键。 10. **测试**: JUnit、Mockito等工具用于编写单元测试，Selenium等进行UI自动化测试，确保代码质量。 11. **设计模式**: 了解并应用工厂模式、单例模式...
7.10日学习打卡----初学Redis（五）
m0_74436895的博客
07-11 1145
经历了 1次pipeline(n条命令) = 1次网络时间 + n次命令时间，这大大减少了网络时间的开销，这就是流水线。执行一条命令在redis端可能需要几百微秒，而在网络光纤中传输只花费了13毫秒。注意在执行批量操作而没有使用pipeline功能，会将大量的时间耗费在每一次网络传输的过程上；而使用pipeline后，只需要经过一次网络传输，然后批量在redis端进行命令操作。这会大大提高了效率。
Redis 第一次作业
Floating_wind的博客
07-15 468
(1） 设置一个hash表，order表里包括的键值信息有：id：1,customer_name：张三。PERSIST name 取消 key （name） 的超时时间。（3）将name列表的尾部元素移除到number列表的头部。查看"系统环境变量"，PATH变量，新增了 Redis的路径。（2） 创建一个hash表，表里的键值批量插入。（3） 获取order对应的map的所有key。（4） 获取order对应的map的键值数量。（2）将列表city里的头部的元素移除。(3) 查看key的超时时间。
redis setnx使用方法
servepeople的博客
07-17 252
SETNX是Redis中的一个命令，用于设置键的值，只有当键不存在时才进行设置。如果键已经存在，则不进行任何操作。
redis中的streams实现mq
z3551906947的博客
07-15 608
具体的redis指令就不做过多的分析，接下来就要是通过小徐先生的几张图，来了解里面的具体流程，让大家先清楚一个大概过程，然后再进行深究具体问题。外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传下面这个是别人公众号上面的图，利用这个图，可以很清楚的看到客生产者使用redis的命令将数据放到redis的streams里面之中，然后消费者通过获取信息进行消费，如果消费成功的话，就是要给redis回应一个ack，这样就完美的保证了数据被消费。
Redis新数据类型
爱吃Java的羊的博客
07-18 139
命令Bitmaps与set对比
Redis中数据分片与分片策略
2301_76166241的博客
07-17 880
数据分片是一种将数据分割并存储在多个节点上的技术，可以有效提高系统的扩展性和性能。在Redis中，数据分片主要用于解决单个实例存储容量和性能瓶颈的问题。通过将数据分散存储到多个Redis节点中，可以将负载均衡到不同的服务器上，提高系统的吞吐量和响应速度。
Java-使用Redisson实现的分布式锁
兴趣是最好的老师
07-15 263
首先，你需要在项目中添加Redisson的依赖。在使用Redisson实现的分布式锁时，你可以很容易地在Java中加入多线程代码来模拟并发环境下。以下是一个使用Redisson的RLock接口创建分布式锁并在多线程环境中使用的示例代。注意，我们在finally块中检查锁是否由当前线程持有，如果是，则释放锁。我们创建了一个固定大小的线程池，然后提交了五个任务到线程池中。每个任务都尝试获取锁，如。果成功则输出一条消息，然后模拟一个长时间运行的任务，最后释放锁。如果获取锁失败，也会输。导致的锁未被释放的情况。
Another-redis-desktop-manager+ffmpeg
最新发布
weixin_45673389的博客
07-18 79
3.添加环境变量：添加到path里，添加安装目录中的bin文件夹路径。一、Another-redis-desktop-manager。
day04：Redis和店铺营业状态设置
m0_69266818的博客
07-15 825
介绍了Redis命令和用java操作redis还有营业额状态接口的书写
dockercompose搭建redis集群
10-29
使用 Docker Compose 可以快速搭建 Redis 集群，实现高可用性和高性能的分布式缓存。下面是搭建 Redis 集群的步骤： 1. 创建一个 redis-cluster 的文件夹，在其中创建多个文件夹，每个文件夹代表一个 Redis 节点，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值