Redis集群（3.X后原生集群）实践

最新推荐文章于 2023-09-10 16:47:10 发布
最新推荐文章于 2023-09-10 16:47:10 发布
阅读量736 收藏
点赞数 3
分类专栏： linux 文章标签： redis clustering
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44639164/article/details/122277073
版权

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

Redis安装

Centos7 yum 安装的redis最新版本

启动redis服务

  • 这里启动6个redis服务，3主3从，如下分别为其创建conf配置文件，再一一启动

redis.conf文件夹内容如下

cluster-enabled yes #是否开启集群模式
port 700x
  • 然后分别创建conf文件
[root@iZuf64res1ona9ad2ddsejZ ~]# cd /root/
[root@iZuf64res1ona9ad2ddsejZ ~]# mkdir cluster-test
[root@iZuf64res1ona9ad2ddsejZ ~]# cd cluster-test/
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7000
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7001
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7002
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7003
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7004
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# mkdir 7005
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7000/redis.conf
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7001/redis.conf
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7002/redis.conf
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7003/redis.conf
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7004/redis.conf
[root@iZuf64res1ona9ad2ddsejZ cluster-test]# vim 7005/redis.conf

打开后分别填入相应内容

  • 前台启动6个redis服务
[root@iZuf64res1ona9ad2ddsejZ ~]# cd /root/cluster-test/7000
[root@iZuf64res1ona9ad2ddsejZ 7000]# redis-server redis.conf
15423:C 02 Jan 2022 14:00:54.003 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo
15423:C 02 Jan 2022 14:00:54.003 # Redis version=6.2.6, bits=64, commit=00000000, modified=0, pid=15423, just started
15423:C 02 Jan 2022 14:00:54.003 # Configuration loaded
15423:M 02 Jan 2022 14:00:54.004 * monotonic clock: POSIX clock_gettime
15423:M 02 Jan 2022 14:00:54.004 * No cluster configuration found, I'm 85a76e39ca29ab52c3cc0eded001acad020bc007
                _._                                                  
           _.-``__ ''-._                                             
      _.-``    `.  `_.  ''-._           Redis 6.2.6 (00000000/0) 64 bit
  .-`` .-```.  ```\/    _.,_ ''-._                                  
 (    '      ,       .-`  | `,    )     Running in cluster mode
 |`-._`-...-` __...-.``-._|'` _.-'|     Port: 7000
 |    `-._   `._    /     _.-'    |     PID: 15423
  `-._    `-._  `-./  _.-'    _.-'                                   
 |`-._`-._    `-.__.-'    _.-'_.-'|                                  
 |    `-._`-._        _.-'_.-'    |           https://redis.io       
  `-._    `-._`-.__.-'_.-'    _.-'                                   
 |`-._`-._    `-.__.-'    _.-'_.-'|                                  
 |    `-._`-._        _.-'_.-'    |                                  
  `-._    `-._`-.__.-'_.-'    _.-'                                   
      `-._    `-.__.-'    _.-'                                       
          `-._        _.-'                                           
              `-.__.-'                                               

15423:M 02 Jan 2022 14:00:54.008 # WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.
15423:M 02 Jan 2022 14:00:54.008 # Server initialized
15423:M 02 Jan 2022 14:00:54.008 # WARNING overcommit_memory is set to 0! Background save may fail under low memory condition. To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.
15423:M 02 Jan 2022 14:00:54.008 * Loading RDB produced by version 6.2.6
15423:M 02 Jan 2022 14:00:54.008 * RDB age 43886 seconds
15423:M 02 Jan 2022 14:00:54.008 * RDB memory usage when created 0.81 Mb
15423:M 02 Jan 2022 14:00:54.008 # Done loading RDB, keys loaded: 2, keys expired: 0.
15423:M 02 Jan 2022 14:00:54.008 * DB loaded from disk: 0.000 seconds
15423:M 02 Jan 2022 14:00:54.008 # I have keys for unassigned slot 903. Taking responsibility for it.
15423:M 02 Jan 2022 14:00:54.008 # I have keys for unassigned slot 6918. Taking responsibility for it.
15423:M 02 Jan 2022 14:00:54.012 * Ready to accept connections

其余5个启动如上同理

  • 检测端口

其中7000-7005是redis的客户端端口，17000-17005是redis内部通信端口

[root@iZuf64res1ona9ad2ddsejZ cluster-test]# ss -tanl | grep 700
LISTEN     0      128          *:17004                    *:*                  
LISTEN     0      128          *:17005                    *:*                  
LISTEN     0      128          *:7000                     *:*                  
LISTEN     0      128          *:7001                     *:*                  
LISTEN     0      128          *:7002                     *:*                  
LISTEN     0      128          *:7003                     *:*                  
LISTEN     0      128          *:7004                     *:*                  
LISTEN     0      128          *:7005                     *:*                  
LISTEN     0      128          *:17000                    *:*                  
LISTEN     0      128          *:17001                    *:*                  
LISTEN     0      128          *:17002                    *:*                  
LISTEN     0      128          *:17003                    *:*                  
LISTEN     0      128       [::]:17004                 [::]:*                  
LISTEN     0      128       [::]:17005                 [::]:*                  
LISTEN     0      128       [::]:7000                  [::]:*                  
LISTEN     0      128       [::]:7001                  [::]:*                  
LISTEN     0      128       [::]:7002                  [::]:*                  
LISTEN     0      128       [::]:7003                  [::]:*                  
LISTEN     0      128       [::]:7004                  [::]:*                  
LISTEN     0      128       [::]:7005                  [::]:*                  
LISTEN     0      128       [::]:17000                 [::]:*                  
LISTEN     0      128       [::]:17001                 [::]:*                  
LISTEN     0      128       [::]:17002                 [::]:*                  
LISTEN     0      128       [::]:17003                 [::]:*                  
[root@iZuf64res1ona9ad2ddsejZ cluster-test]#

创建集群

脚本的槽位通过redis-trib这个ruby脚本来分配，3个主实例，3个从实例

  • 安装依赖

由于 Redis 集群需要使用 ruby 命令，所以我们需要安装 ruby 和相关接口。

yum install centos-release-scl-rh
yum install rh-ruby24 -y
scl enable rh-ruby24 bash
yum install rubygems
gem install redis # 安装ruby操作redis模块
  • 分配槽位

使用如下命令， --replicas 1 表示每个主有一个从，如下后三个redis服务自动为从

/usr/local/redis-cluster/bin/redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

Redis Cluster 在5.0之后取消了ruby脚本 redis-trib.rb的支持（手动命令行添加集群的方式不变），集合到redis-cli里，避免了再安装ruby的相关环境故可以参考

https://blog.csdn.net/weixin_45904404/article/details/107640193
https://www.cnblogs.com/zhoujinyi/p/11606935.html

redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-replicas 1

执行命令后会问你是否同意如上的分配,即可以看到master的槽位分配情况，slaver的情况。

输入yes

[root@iZuf64res1ona9ad2ddsejZ /]# redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 127.0.0.1:7004 to 127.0.0.1:7000
Adding replica 127.0.0.1:7005 to 127.0.0.1:7001
Adding replica 127.0.0.1:7003 to 127.0.0.1:7002
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: 85a76e39ca29ab52c3cc0eded001acad020bc007 127.0.0.1:7000
   slots:[0-5460],[6918] (5461 slots) master
M: c6ccc961b8db3011ad11052ba96b7a6093e5db58 127.0.0.1:7001
   slots:[5461-10922] (5462 slots) master
M: 54d435e747df905ef175eb8b18b15da446b2ef8d 127.0.0.1:7002
   slots:[10923-16383] (5461 slots) master
S: 032ff14ea3fe244f35bd80ae93a881ce39a3b38f 127.0.0.1:7003
   replicates 54d435e747df905ef175eb8b18b15da446b2ef8d
S: 46269c92bd6fec251e39e6a0ca7af76c9423cffe 127.0.0.1:7004
   replicates 85a76e39ca29ab52c3cc0eded001acad020bc007
S: 7e305c4beed5979384647abe8f0c35dd447903e9 127.0.0.1:7005
   replicates c6ccc961b8db3011ad11052ba96b7a6093e5db58
Can I set the above configuration? (type 'yes' to accept): yes

同意后输出如下：

>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
.
>>> Performing Cluster Check (using node 127.0.0.1:7000)
M: 85a76e39ca29ab52c3cc0eded001acad020bc007 127.0.0.1:7000
   slots:[903] (1 slots) master
   1 additional replica(s)
M: c6ccc961b8db3011ad11052ba96b7a6093e5db58 127.0.0.1:7001
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 7e305c4beed5979384647abe8f0c35dd447903e9 127.0.0.1:7005
   slots: (0 slots) slave
   replicates c6ccc961b8db3011ad11052ba96b7a6093e5db58
M: 54d435e747df905ef175eb8b18b15da446b2ef8d 127.0.0.1:7002
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 032ff14ea3fe244f35bd80ae93a881ce39a3b38f 127.0.0.1:7003
   slots: (0 slots) slave
   replicates 54d435e747df905ef175eb8b18b15da446b2ef8d
S: 46269c92bd6fec251e39e6a0ca7af76c9423cffe 127.0.0.1:7004
   slots: (0 slots) slave
   replicates 85a76e39ca29ab52c3cc0eded001acad020bc007
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[ERR] Not all 16384 slots are covered by nodes.

[root@iZuf64res1ona9ad2ddsejZ /]#

测试

  • 验证主从关系

查看7002的主从关系，发现其从节点是slave0:ip=127.0.0.1,port=7003

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7002
127.0.0.1:7002> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=127.0.0.1,port=7003,state=online,offset=882,lag=0
master_failover_state:no-failover
master_replid:a67a48275f960a09303d494e0159135cdba0e62d
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:882
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:882
  • 下线主进程

在7002的窗口停止前台的运行，在7003的窗口查看前台信息如下，发现一段时间失联后7003说：“我赢了，我是master”Failover election won: I'm the new master.

在这里插入图片描述

  • 上线7002进程

在线下了7002redis服务后，再次启动，查看其信息，发现他自动成为了7003的从节点，并不会竞争主节点。

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7002
127.0.0.1:7002> info replication
# Replication
role:slave
master_host:127.0.0.1
master_port:7003
master_link_status:up
master_last_io_seconds_ago:10
master_sync_in_progress:0
slave_read_repl_offset:1050
slave_repl_offset:1050
slave_priority:100
slave_read_only:1
replica_announced:1
connected_slaves:0
master_failover_state:no-failover
master_replid:44957f55f69275bd12b97dcf94bdacd391ca7f61
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:1050
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1023
repl_backlog_histlen:28
127.0.0.1:7002>
  • 从节点写数据

在从节点7005写数据，会发现失败

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7005
127.0.0.1:7005> set my 123
(error) READONLY You can't write against a read only replica.
127.0.0.1:7005>
  • 主节点写数据，从节点读数据

主节点7001写数据发现demo写失败，因为不在此服务的槽里面

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7001
127.0.0.1:7001> set my 123
OK
127.0.0.1:7001> set demo 123
(error) MOVED 903 127.0.0.1:7000

为了方便的写非此槽的，注意启动时连接集群启动 -c

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7001 -c
127.0.0.1:7001> set demo 123
-> Redirected to slot [903] located at 127.0.0.1:7000
OK
127.0.0.1:7000>

从节点读数据成功

[root@iZuf64res1ona9ad2ddsejZ bin]# redis-cli -p 7005 -c
127.0.0.1:7005> get demo
-> Redirected to slot [903] located at 127.0.0.1:7000
"123"
127.0.0.1:7000>
AlwaysDayOne
关注
  • 3
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
redis集群原生搭建
01-20
搭建一个redis集群主要分为4个步骤： 创建集群所需要的redis服务一个集群服务的一个基本服务配置： port {port} // 本配置用到7000、7001、7002、7003、7004、7005 daemonize yes dir '/opt/redis/redis/data/' log...
redis集群搭建及遇到的问题
霓虹深处
06-09 4377
首先看之前笔记安装redis（可以不安装，去redis的github上copy源码编译）。 Redis群集配置参数 我们即将创建一个示例集群部署。在继续之前，让我们介绍Redis Cluster在redis.conf文件中引入的配置参数。有些人会很明显，有些人会在你继续阅读时更清楚。 cluster-enabled<yes/no>：如果是，则在特定Redis实例中启用Redis群...
Cluster模式搭建
weixin_60274825的博客
12-14 1451
cluster集群搭建
CentOS8 redis5 集群安装，配置，停止，重建，自启动
03-27 1537
一、下载 https://redis.io/download http://download.redis.io/releases/ 二、说明 redis5.0版本之后可以直接使用redis-cli命令创建集群，不使用redis-trib.rb命令了。 本文一在主机上建立3主，3从集群。实际最少需要3台服务器，6个节点。当然6个服务器更好了。 三、安装 1、上传解压文件 上传redi...
redis：redis cluster集群实践
OceanStar的博客
10-06 1142
本文是集群的基础介绍（安装、测试、操作），没有介绍复杂难懂的概念。如果你想深入了解集群原理请参考 Redis 集群规范 。 Redis的版本>=3.0 redis集群介绍 redis cluster提供一种redis安装方式：数据自动在多个redis节点间分片 redis cluster提供一定程度的高可用，在实际的环境中当某些节点失败或者不能通讯的情况下能够继续提供服务。大量节点失败的情况下集群也会停止服务（比如大多数主节点不可用） redis集群提供的能力： 自动切分数据集到多个节点上 当
Redis的主从和集群设置
jfcat的专栏
06-17 512
准备环境 Redis主从 高可用
redis集群架构
02-24
老规矩，我以循序渐进的方式来讲，我一共经历过三套集群架构的演进！这套架构使用的是社区版本推出的原生高可用解决方案，其架构图如下！这里Sentinel的作用有三个:监控:Sentinel会不断的检查主服务器和从服务器是否...
Redis集群的离线安装步骤及原理详析
01-19
本文分为两部分，第一部分先通过原生命令的安装来实现redis集群的部署，通过原生命令的安装对于了解redis集群的实现原理有很大的帮助，第二部分通过官方工具Ruby来进行Redis集群的安装，通过Ruby安装Redis集群的时候...
Redis 集群解决方案 Codis.zip
07-17
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的...
Redis官方集群搭建&使用
tcvictor的专栏
03-29 866
Redis官方集群设计目标 高性能，并且多达1000个节点的线性可扩展性。没有代理，使用异步复制，并且在进行赋值时没有合并操作。 可接受程度的写安全：当客户端与大多数master节点建立连接后，系统努力（使用最优的方式）保持来自客户端的写操作。通常有小窗口，其中确认的写操作可能会丢失。当客户端在一个小的分区中，窗口丢失写操作会更大。 可用性：Redis集群支持网络分区——其中大部分主节点都可访问，并
Redis入门完整教程：搭建集群
Lee达森的博客
07-07 762
介绍完Redis集群分区规则之后，下面我们开始搭建Redis集群。搭建集 群工作需要以下三个步骤： 1）准备节点。 2）节点握手。 3）分配槽。 10.2.1　准备节点 Redis集群一般由多个节点组成，节点数量至少为6个才能保证组成完整 高可用的集群。每个节点需要开启配置cluster-enabled yes，让Redis运行在集 群模式下。建议为集群内所有节点统一目录，一般划分三个目录：conf、 data、log，分别存放配置、数据和日志相关文件。把6个节点配置统一放在 conf目录
搭建redis集群遇到的问题
liuzhilong的博客
10-30 1293
我的环境有一个6379端口的redis实例，想要创建redis，需要在本机上启动6381端口的实例，并开启集群功能 关键步骤 1.开启cluster-enabled 2.cluster meet <ip> <port> 测试过程 1.启动6381端口的redis实例 1.1配置文件。修改端口，开启cluster功能 [root@lzl redis-5.0.3]# cp redis6380.conf redis6381.conf [root@lzl redis-5...
Redis详解之-集群方案：高性能（使用原生Redis Cluster）（四）
12-03 753
讨论Redis中两种高性能集群方案：Twemproxy和Redis自带的Cluster方案。 2、Redis高性能集群：Twemproxy 2-1、Twemproxy概要 Twemproxy是一个Twitter开源的一个Redis/Memcache代理服务器。Twemproxy（也称为nutcraker）恰恰是为了解决将多个独立的Redis节点组成集群，同时提供缓存服务的问题。 您可以在G...
redis入门（8）：redis集群试验
火焰
08-25 416
官方文档： https://redis.io/topics/cluster-tutorial 概念参考： https://www.cnblogs.com/leeSmall/p/8414687.html https://www.cnblogs.com/zy-303/p/10273167.html 试验环境： centos7 x 64 redis5.0.5 试验目的： 单个虚拟机运行6个r...
Linux安装Redis 4.0.14组建集群时报错处理
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
11-11 1418
【代码】Linux安装Redis 4.0.14组建集群时报错处理。
Redis-Cluster集群搭建教程
远古大猛犸
06-21 507
本教程是利用redis6.0版本进行搭建的集群方式，因为redis发布了5.0之后推出了很多新的特性，其中一点就是放弃Ruby的集群方式，改用的C语言编写的redis-cli，使redis集群构建方式复杂度大大降低 edis-cluster架构图（三主三从6个节点的配置） redis-cluster架构总结:   1)、无中心化就是所谓的去中心化(客户端与redis节点直连，不需要中间proxy层.客户端不需要连接集群所有节点，连接集群中任何一个可用节点即可)   2)、在线自动扩容缩容   3)
2021-06-25 redis-cluster集群创建
技术之路
06-25 542
摘要: 记录redis的cluster集群创建过程 创建cluster集群: 从生命周期上看,可以分为两个部分 每个节点之间互相连接, 此时所有的节点都为master 如果需要创建从节点, 则选取节点设置为slave, 并选取master建立主从关系 建立slave流程: (gdb) bt #0 replicationCacheMasterUsingMyself () at replication.c:2254 #1 0x000000000045381c in replicatio
Redis使用原生命令搭建集群
最新发布
SimpleSimpleSimples的博客
09-10 297
rwxr-xr-x. 1 hadoop hadoop 25008 9月 10 23:22 redis-check-aof。-rwxr-xr-x. 1 hadoop hadoop 5190752 9月 10 23:22 redis-check-rdb。-rwxr-xr-x. 1 hadoop hadoop 5190752 9月 10 23:22 redis-server。-rwxr-xr-x. 1 hadoop hadoop 2585952 9月 10 23:22 redis-cli。
Redis 集群教程
热门推荐
软件哲学
10-18 1万+
翻译自官方文档 Redis cluster tutorialRedis 集群教程该文档是一篇关于redis集群的教程。该教程并不会让你去理解复杂分布式系统概念，只会告诉你如何安装、测试和操作一个集群。在这个过程中该文档只会从用户角度去描述系统的行为，并不会详细的探究Redis集群手册中的内容。该教程会努力的从最终用户的视角出发， 来介绍Redis集群的可用性和一致性这些特性。不过请放心，我们会用一
redis集群部署方式
05-13
除了Redis原生的集群部署方式，还有一些第三方工具可以方便地部署Redis集群，例如： 1. Redis Cluster Manager (RCM) 2. Redis Sentinel 3. Redisson 这些工具可以帮助用户自动化部署Redis集群，并提供了一些额外...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AlwaysDayOne

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值