Redis 集群模式部署与测试

最新推荐文章于 2023-07-07 11:49:18 发布
最新推荐文章于 2023-07-07 11:49:18 发布
阅读量281 收藏 1
点赞数
分类专栏： redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_20029829/article/details/108432245
版权

前言

  本文为拉勾高薪训练营作业，搭建三主三从redis集群模式，并在搭建完成后，添加一个master主节点和一个slave从节点

1 环境说明：

1.1 各个软件版本说明

（1）虚拟机：Vmware 15
（2）操作系统：Centos 7
（3）redis版本：redis-5.0.7

1.2 各个机器节点说明

redis节点IP端口角色
master1192.168.122.1286379主节点1
master2192.168.122.1296379主节点2
master3192.168.122.1306379主节点3
master4192.168.122.1306479集群搭建完成后，新增主节点
slave1192.168.122.1286380从节点1
slave2192.168.122.1296380从节点2
slave3192.168.122.1306380从节点3
slave4192.168.122.1306480集群搭建完成后，新增从节点

2 集群环境搭建

2.1单节点配置redis环境

  （1）在192.168.122.129节点上下载安装包，并解压安装

mkdir -p /opt/redis/redis-cluster/master ##主节点安装位置
mkdir -p /opt/redis/redis-cluster/slave	##从节点安装位置
cd /opt/redis
wget http://download.redis.io/releases/redis-5.0.7.tar.gz ##	下载安装包
tar -zxvf redis-5.0.7.tar.gz	##	解压安装包
cd /redis-5.0.7
make && make PREFIX=/opt/redis/redis-cluster/master install

2.2 设置配置文件

  将redis安装目录下的redis.conf复制到master/bin目录下，并编辑配置文件

scp redis.conf /opt/redis/redis-cluster/master/bin
vim reids.conf
#bind 127.0.0.1  
protected-mode no 
daemonize yes
cluster-enabled yes

2.3 将master复制到slave中

  复制master到slave中，并修改配置文件redis.conf,修改端口号为6380

cd /opt/redis/redis-culster
scp -r master/ slave/
cd slave/bin
vim redis.conf
port 6380

2.4 将已配置好的redis 复制到其他的机器上

  在这里直接使用之前上课时用到过的rsync-script直接进行复制

cd /opt/redis/
rsync-script redis-cluster

2.5 启动各个节点

  在各个机器上执行以下命令

cd /opt/redis/redis-culster/master/bin 
./redis-server redis.conf
cd /opt/redis/redis-culster/slave/bin
./redis-server redis.conf

2.6 配置集群模式

  在192.168.122.128节点上,执行命令

cd /opt/redis/redis-culster/master/bin 
./redis-cli --cluster create 192.168.122.128:6379 192.168.122.129:6379 192.168.122.130:6379 192.168.122.128:6380 192.168.122.129:6380 192.168.122.130:6380 --cluster-replicas 1

  执行结果

[root@mysql-master bin]# ./redis-cli --cluster create 192.168.122.128:6379 192.168.122.129:6379 192.168.122.130:6379 192.168.122.128:6380 192.168.122.129:6380 192.168.122.130:6380 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.122.129:6380 to 192.168.122.128:6379
Adding replica 192.168.122.130:6380 to 192.168.122.129:6379
Adding replica 192.168.122.128:6380 to 192.168.122.130:6379
M: 0d41f47d99727e9782e7e812252c5a2d6bedf3ff 192.168.122.128:6379
   slots:[0-5460] (5461 slots) master
M: 655a430bfa4f8cee938aeb994999466e703ccfd7 192.168.122.129:6379
   slots:[5461-10922] (5462 slots) master
M: d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 192.168.122.130:6379
   slots:[10923-16383] (5461 slots) master
S: 880bb66b37ecd0dd8a25b8e05c474feec97f5d32 192.168.122.128:6380
   replicates d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9
S: 51d03c9c38c7cac9693ffddecb0973fbcf1f14c9 192.168.122.129:6380
   replicates 0d41f47d99727e9782e7e812252c5a2d6bedf3ff
S: 359583bb1a9ed9a3fa2540ba2208576bf267e980 192.168.122.130:6380
   replicates 655a430bfa4f8cee938aeb994999466e703ccfd7
Can I set the above configuration? (type 'yes' to accept): yese^H
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
...
>>> Performing Cluster Check (using node 192.168.122.128:6379)
M: 0d41f47d99727e9782e7e812252c5a2d6bedf3ff 192.168.122.128:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 51d03c9c38c7cac9693ffddecb0973fbcf1f14c9 192.168.122.129:6380
   slots: (0 slots) slave
   replicates 0d41f47d99727e9782e7e812252c5a2d6bedf3ff
S: 359583bb1a9ed9a3fa2540ba2208576bf267e980 192.168.122.130:6380
   slots: (0 slots) slave
   replicates 655a430bfa4f8cee938aeb994999466e703ccfd7
M: d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 192.168.122.130:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 880bb66b37ecd0dd8a25b8e05c474feec97f5d32 192.168.122.128:6380
   slots: (0 slots) slave
   replicates d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9
M: 655a430bfa4f8cee938aeb994999466e703ccfd7 192.168.122.129:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

2.7 登录redis查看结果

[root@mysql-master bin] cd /opt/redis/redis-cluster/master/bin
[root@mysql-master bin] ./redis-cli -h 192.168.122.128 -p 6379 -c 
192.168.122.128:6379> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:333
cluster_stats_messages_pong_sent:335
cluster_stats_messages_sent:668
cluster_stats_messages_ping_received:330
cluster_stats_messages_pong_received:333
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:668

192.168.122.128:6379> cluster nodes
51d03c9c38c7cac9693ffddecb0973fbcf1f14c9 192.168.122.129:6380@16380 slave 0d41f47d99727e9782e7e812252c5a2d6bedf3ff 0 1599379774000 5 connected
359583bb1a9ed9a3fa2540ba2208576bf267e980 192.168.122.130:6380@16380 slave 655a430bfa4f8cee938aeb994999466e703ccfd7 0 1599379774000 6 connected
d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 192.168.122.130:6379@16379 master - 0 1599379775000 3 connected 12256-16383
880bb66b37ecd0dd8a25b8e05c474feec97f5d32 192.168.122.128:6380@16380 slave d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 0 1599379774577 4 connected
0d41f47d99727e9782e7e812252c5a2d6bedf3ff 192.168.122.128:6379@16379 myself,master - 0 1599379772000 1 connected 1333-5460
655a430bfa4f8cee938aeb994999466e703ccfd7 192.168.122.129:6379@16379 master - 0 1599379775892 2 connected 6795-10922

3 新增主从节点，加入到集群中

3.1 复制主从节点

  在192.168.122.130 这台机器上，复制redis环境

cd /opt
scp -r redis/ redisNew/

3.2 配置主从环境

  （1）删除 dump.rdb,nodes.conf这两个文件，如果不删除这两个文件，在往集群中添加节点时会报错
  （2）修改redis.conf文件，修改端口号

 cd /opt/redisNew/redis-cluster/master/bin
 vim redis.conf
 port 6749
 cd /opt/redisNew/redis-cluster/slave/bin
 vim redis.conf
 port 6480

3.3 启动主节点，并将主节点添加到集群中

  （1）在192.168.122.130这个节点上，启动主节点

 cd /opt/redisNew/redis-cluster/master/bin
./redis-server redis.conf

  （2）在192.168.122.128上，将节点添加到集群中

 cd /opt/redisNew/redis-cluster/master/bin
 ./redis-cli --cluster add-node 192.168.122.130:6479 192.168.122.128:6379
 >>> Adding node 192.168.122.130:6479 to cluster 192.168.122.128:6379
>>> Performing Cluster Check (using node 192.168.122.128:6379)
M: 0d41f47d99727e9782e7e812252c5a2d6bedf3ff 192.168.122.128:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 51d03c9c38c7cac9693ffddecb0973fbcf1f14c9 192.168.122.129:6380
   slots: (0 slots) slave
   replicates 0d41f47d99727e9782e7e812252c5a2d6bedf3ff
S: 359583bb1a9ed9a3fa2540ba2208576bf267e980 192.168.122.130:6380
   slots: (0 slots) slave
   replicates 655a430bfa4f8cee938aeb994999466e703ccfd7
M: d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 192.168.122.130:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 880bb66b37ecd0dd8a25b8e05c474feec97f5d32 192.168.122.128:6380
   slots: (0 slots) slave
   replicates d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9
M: 655a430bfa4f8cee938aeb994999466e703ccfd7 192.168.122.129:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
>>> Send CLUSTER MEET to node 192.168.122.130:6479 to make it join the cluster.
[OK] New node added correctly.

3.4 启动从节点，将从节点添加到集群中，并指定从节点的master

  （1）在192.168.122.130这台机器上

cd /opt/redisNew/redis-cluster/slave/bin
./redis-server redis.conf

  （2）在192.168.122.128这台机器上将从节点加入到集群中，并指定主节点id

cd /opt/redisNew/redis-cluster/master/bin
./redis-cli --cluster add-node 192.168.122.130:6480 192.168.122.128:6379 --cluster-slave --cluster-master-id 46a2962a363a00f75852bf343f4226f78ebf0dcb

3.5 查看添加结果

[root@mysql-master bin]# ./redis-cli -h 127.0.0.1 -p 6379 -c
127.0.0.1:6379> cluster nodes
51d03c9c38c7cac9693ffddecb0973fbcf1f14c9 192.168.122.129:6380@16380 slave 0d41f47d99727e9782e7e812252c5a2d6bedf3ff 0 1599379774000 5 connected
359583bb1a9ed9a3fa2540ba2208576bf267e980 192.168.122.130:6380@16380 slave 655a430bfa4f8cee938aeb994999466e703ccfd7 0 1599379774000 6 connected
966f5695b5d4793027d176fb3af8fdc66f7a7256 192.168.122.130:6480@16480 slave 46a2962a363a00f75852bf343f4226f78ebf0dcb 0 1599379775000 7 connected
d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 192.168.122.130:6379@16379 master - 0 1599379775000 3 connected 12256-16383
46a2962a363a00f75852bf343f4226f78ebf0dcb 192.168.122.130:6479@16479 master - 0 1599379773000 7 connected 0-1332 5461-6794 10923-12255
880bb66b37ecd0dd8a25b8e05c474feec97f5d32 192.168.122.128:6380@16380 slave d602bcdbe33cbd4ba27e98f122dd4f1870a03fc9 0 1599379774577 4 connected
0d41f47d99727e9782e7e812252c5a2d6bedf3ff 192.168.122.128:6379@16379 myself,master - 0 1599379772000 1 connected 1333-5460
655a430bfa4f8cee938aeb994999466e703ccfd7 192.168.122.129:6379@16379 master - 0 1599379775892 2 connected 6795-10922

4 通过java客户端对集群进行操作

  （1） 创建maven项目

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
    <groupId>com.lagou</groupId>
    <artifactId>jedis-cluster</artifactId>
    <version>1.0-SNAPSHOT</version>
    <dependencies>
        <dependency>
            <groupId>redis.clients</groupId>
            <artifactId>jedis</artifactId>
            <version>3.2.0</version>
        </dependency>
    </dependencies>
</project>

（2）编写代码，查看结果

public class JedisCluster {
    public static void main(String[] args) {
        Set<HostAndPort> nodes = new HashSet<HostAndPort>();
        nodes.add(new HostAndPort("192.168.122.128", 6379));
        nodes.add(new HostAndPort("192.168.122.128", 6380));
        nodes.add(new HostAndPort("192.168.122.129", 6379));
        nodes.add(new HostAndPort("192.168.122.129", 6380));
        nodes.add(new HostAndPort("192.168.122.130", 6379));
        nodes.add(new HostAndPort("192.168.122.130", 6380));
        nodes.add(new HostAndPort("192.168.122.130", 6479));
        nodes.add(new HostAndPort("192.168.122.130", 6480));
        JedisPoolConfig jedisPoolConfig = new JedisPoolConfig();
        JedisCluster jedisCluster = new JedisCluster(nodes, jedisPoolConfig);
        jedisCluster.set("name:1", "zhangfei");
        jedisCluster.set("name:2", "zhaoyun");
        jedisCluster.set("name:3", "guanyu");

        System.out.println(jedisCluster.get("name:1"));
        System.out.println(jedisCluster.get("name:2"));
        System.out.println(jedisCluster.get("name:3"));
        jedisCluster.close();
    }
}
qq_20029829
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
redis-cluster集群部署及测试（超详细）
浴火成诗的博客
10-18 8008
redis-cluster集群部署及测试（超详细），傻瓜式照搬
linux 运维工程师 在一台centos7服务器上面部署 redis 哨兵集群
09-14
这是一篇在一台centos7 系统上面部署redis 哨兵模式的文档，也适用于linux 其他系统，...假如你的公司生产环境需要部署redis 集群，至少需要三台服务器，而测试环境则不需要三台服务器，用一台服务器就好了，节省资源。
Redis集群性能测试分析
10-16
Redis是一个非关系型数据库，属于内存级数据库。但是由于数据量的不断增大，单机的Redis物理内存远远无法满足大数据的需要，因此需要搭建分布式的Redis，可以动态扩展内存，弥补单机Redis物理内存不够的缺点。本次测试旨在对Redis各方面性能有深入的了解，为今后的工作打好基础。本次实验的目的主要是搭建Redis Cluster和TwemProxy Redis两种集群，分别对其进行性能测试，测试出集群性能的拐点，找出性能的瓶颈有哪些，并对两套集群进行比较，以便于在不同业务场景下择优选择。
Redis Cluster集群的搭建与测试
moneywenxue的博客
10-30 892
一、前言 redis最初使用主从模式作集群，但是这种模式master宕机后需要手动配置将slave转成master；后来为了高可用，提出了哨兵模式，该模式有哨兵角色监视master和slave，若master宕机，可以自动将slave转换成master，但哨兵模式也有不足：1.不能动态扩充；2.仍然不能支持并发量特别大的场景。所以redis3.x提出来了cluster集群模式。 二、redis-cluster设计 Redis-Cluster采用无中心结构，每个节点报存数据和集群状态，每个节点和其他节点
redis（6.0以上版本）哨兵、生产级redis cluster集群部署、测试、特点
youcan_doit的博客
07-04 905
redis（6.0以上版本）哨兵、生产级redis cluster集群部署、测试、特点
redis集群测试
qq_27164239的博客
07-15 1631
redis集群测试
Redis 部署安装 常见redis 4中部署详解
06-23
redis 集群部署 Redis安装及客户端连接 1. Redis 安装 2. Redis 客户端连接及测试 Redis 持久化数据 1. RDB数据持久化 2. AOF数据持久化（推荐方案） Redis 主从复制 详解 Redis 哨兵模式Sentinel 详解 ...
redis哨兵模式
01-18
包含REDIS3.2.12安装包，以及redis哨兵机制的伪集群部署和真集群部署，本人已经测试过可以
Redis全面接触.pptx
03-23
2.了解Redis的特点，发展过程，持久化，以及部署的三种模式进行非常细的讲解 3.对五大数据存储类型做细致化的讲解，以及描述出各数据类型相应的方法 4.了解Redis内存是如何存储的，以及内部内存分配和优化 5.结合...
mmall-kay-Java:SSM电商项目，项目版本由V1.0 单机部署+FTP服务器演进为V2Tomcat集群+Redis分布式模式。技术有点老了，建议学习SpringBoot版本, SpringBoot 版本正在升级中
05-27
支持本地测试，使用 Testcontainers 来Mock MySQL, Redis maven 切换成 gradle 修改原有的代码风格，遵循 google java code style Swagger2 UI 地址： mmall 项目整体模块划分 1 用户模块 2 分类管理模块 3 产品管理...
Redis集群测试
08-16
Redis集群测试
redis（4.0.10版本）哨兵、redis cluster集群部署、原理、测试
youcan_doit的博客
07-03 607
redis（4.0版本）哨兵、redis cluster集群部署、原理、测试
Redis Cluster部署
最新发布
weixin_44195169的博客
07-07 524
Redis Cluster部署
redis集群配置和测试
lipengyao2010的专栏
12-15 2403
一、在本机建立6个单REDIS节点，并以集群方式运行。 cluster-enabled yes # Every cluster node has a cluster configuration file. This file is not # intended to be edited by hand. It is created and updated by Redis nodes. # Every Redis Cluster node requires a different cluster
Redis cluster集群部署详细讲解
武子豪的博客
06-16 3890
Redis Cluster是redis的分布式解决方案，在3.0版本正式推出。当遇到单机、内存、并发、流量等瓶颈时，可以采用Cluster架构方案达到负载均衡的目的。Redis cluster之前的分布式方案有两种： 2.数据分布 分布式数据库首先要解决吧整个数据库集按照分区规则映射到多个节点的问题，即把数据集划分到多个节点上，每个节点负责整体数据的一个子集，需要关注的是数据分片规则，Rredis Cluster采用哈希分片规则。1.槽位分配slot2.65534个槽位3.每个槽都得分配到位，有一个槽没有分
Redis 服务器管理（集群主从复制及高可用）
08-30
Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一样，为了保证效率，数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，并且在此基础上实现了master-slave(主从)同步。 Redis的出现，很大程度补偿了memcached这类key/value存储的不足，在部分场合可以对关系数据库起到很好的补充作用。它提供了Java，C/C++，C#，PHP，JavaScript，Perl，Object-C，Python，Ruby，Erlang等客户端，使用很方便。 Redis支持主从同步。数据可以从主服务器向任意数量的从服务器上同步，从服务器可以是关联其他从服务器的主服务器。这使得Redis可执行单层树复制。存盘可以有意无意的对数据进行写操作。由于完全实现了发布/订阅机制，使得从数据库在任何地方同步树时，可订阅一个频道并接收主服务器完整的消息发布记录。同步对读取操作的可扩展性和数据冗余很有帮助。   本课程主要讲解以下内容：1. Redis的基本使用2. Redis数据库的数据类型3. Redis数据库数据管理4. Redis的主从复制5. Redis数据库的持久性6. Redis的高可靠性和集群7. Redis的优化和性能测试8. Redis服务器的维护和管理9. Redis服务器的常见问题排错 
8.4 Redis集群之测试
Steven的博客
02-01 151
连接6371，设置一个key username，可以看到key被运算到14315的槽上，14315槽位于121.4.191.137:6375节点，redis客户端直接重定向到121.4.191.137:6375节点。6376是6373的从节点，在从节点上执行READONLY命令，然后查询6375上的username信息，如果主从节点都没有key，还是会做转向。
Redis集群搭建和启动测试
m0_38105115的博客
07-09 1401
环境： ubuntu16.04 Redis5.0.2 idea Jedis2.0.9 介绍： 我这里搭建的是一个伪分布式集群，六个Redis，三主三从 目录文件： 注意：只是把redis.conf文件复制过去，data目录下的文件是自动生成的。 配置文件： daemonize yes（设置启动为后台进程） port 800*（设置目录的端口号【可以按照自己...
Redis集群性能测试工具redis-benchmark
热门推荐
Flyer的后花园
04-25 1万+
使用本文之前 比如集群在某个机器上7001端口有redis节点记得使用ip 端口 比如如下redis-benchmark  -h 10.166.15.36 -p 7001 -n 100000 -q script load "redis.call('set','foo','一二三四五六七八九十')"./redis-benchmark  -h 10.166.15.36 -p 7001  -q -n 1...
redis集群部署步骤
05-26
其中，-c 参数表示开启集群模式，port 表示任意一个 Redis 实例的端口号。连接成功后，可以使用 Redis 命令操作集群中的数据。 7. 添加和删除节点 需要扩容或缩容 Redis 集群时，可以使用以下命令添加或删除节点：...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值