Redis集群 速成

最新推荐文章于 2024-04-23 16:38:00 发布
最新推荐文章于 2024-04-23 16:38:00 发布
阅读量149 收藏
点赞数
分类专栏： Redis 文章标签： redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TheRichCat/article/details/109714669
版权

介绍和基本原理


Redis集群

  • Redis集群是一个提供在多个Redis间节点间共享数据的程序集
  • Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误
  • Redis集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下可继续处理命令

Redis集群的优势

  • 自动分割数据到不同的节点上
  • 整个集群的部分节点失败或者不可达的情况下能够继续处理命令
  • Redis集群的实现方法·有客户端分片
  • 代理分片服务器端分片

Redis-Cluster数据分片

  • 以3个节点组成的集群为例
    ◆节点A包含0到5500号哈希槽
    ◆节点B包含5501到11000号哈希槽
    ◆节点C包含11001到16384号哈希槽
  • 支持添加或者删除节点
    添加删除节点无需停止服务
    例如
    。如果想新添加个节点D,需要移动节点A,B,C中的部分槽到D上
    。如果想移除节点A，需要将A中的槽移到B和C节点上，再将没有任何槽的A节点从集群中移除

Redis集群的优势

  • 自动分割数据到不同的节点上
  • 整个集群的部分节点失败或者不可达的情况下能够继续处理命令

Redis集群的实现方法

  • 有客户端分片
  • 代理分片
  • 服务器端分片

Redis-Cluster数据分片

  • Redis集群没有使用一致性hash,而是引入了哈希槽概念
  • Redis集群有16384个哈希槽
  • 每个key通过CRC16校验后对16384取模来决定放置槽
  • 集群的每个节点负责一部分哈希槽

Redis-Cluster数据分片(续)
●以3个节点组成的集群为例节点A包含0到5500号哈希槽
◆节点B包含5501到11000号哈希槽
◆节点C包含1001到16384号哈希槽支持添加或者删除节点
◆添加删除节点无需停止服务例如

  • 如果想新添加个节点D,需要移动节点A,B,C中的部分槽到D上
  • 如果想移除节点A，需要将A中的槽移到B和C节点上，再将没有任何槽的A节点从集群中移除

Redis-Cluster的主从复制模型

  • 集群中具有A，B，C三个节点,如果节点B失败了，整个集群就会因缺少5501-11000这个范围的槽而不可用
  • 为每个节点添加一个从节点A1，B1，C1,整个集群便有个master节点和三个slave节点组成,在节点B失败后，集群便会选举B1为新的主节点继续服务
  • 当B和B1都失败后，集群将不可用
    在这里插入图片描述

部署过程详解

修改配置文件

[root@Master1 ~]# vi /etc/redis/6379.conf
 70 bind 192.168.73.10  ###删除之前的127.0.0.1，改为各主机的IP地址
 89 protected-mode no  ###关闭保护模式
 137 daemonize yes  ###以独立进程启动
 833 cluster-enabled yes  ###开启群集功能
 841 cluster-config-file nodes-6379.conf  ###群集名称文件设置
 847 cluster-node-timeout 15000  ###群集超时时间
 700 appendonly yes  ###开启aof持久化

正常启动后，/var/lib/redis/6379/目录下会多出三个文件，第一个是持久化文件appendonly.aof，第二个是RDB持久文件dump.rdb，另外一个是节点首次启动生成的nodes-6379.conf

[root@Master1 ~]# /etc/init.d/redis_6379 start ###重启服务
[root@Master1 ~]# cd /var/lib/redis/6379/
[root@Master1 6379]# ls
appendonly.aof  dump.rdb  nodes-6379.conf

仅在一台redis中操作，准备生成集群：
导入redis-3.2.0.gem 至/OPT并执行

[root@Master1 ~]# cd /opt
[root@Master1 opt]# yum -y install ruby rubygems
[root@Master1 opt]# gem install redis-3.2.0.gem
Successfully installed redis-3.2.0
Parsing documentation for redis-3.2.0
Installing ri documentation for redis-3.2.0
1 gem installed

创建集群

六个实例分为三组，每组一主一从，–replicas 1表示每组一个从，下面交互的时候需要输入yes才可以创建。

[root@Master1 opt]# redis-cli --cluster create --cluster-replicas 1 192.168.73.10:6379 192.168.73.20:6379 192.168.73.30:6379 192.168.73.40:6379 192.168.73.50:6379 192.168.73.60:6379
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383   ###哈希槽
Adding replica 192.168.73.50:6379 to 192.168.73.10:6379
Adding replica 192.168.73.60:6379 to 192.168.73.20:6379
Adding replica 192.168.73.40:6379 to 192.168.73.30:6379   ###主从对应关系
M: e3e856a7b69bff9830dbde43389accdd35e69808 192.168.73.10:6379
   slots:[0-5460] (5461 slots) master
M: 93cb88f8ef0702f09af6ee6147f17a65282d84d7 192.168.73.20:6379
   slots:[5461-10922] (5462 slots) master
M: 0b54b026e3a10a667448bfc8a694de5859c77ede 192.168.73.30:6379
   slots:[10923-16383] (5461 slots) master
S: 259cf1fa747e04cb26f48a9b7337f3b328f6d3fa 192.168.73.40:6379
   replicates 0b54b026e3a10a667448bfc8a694de5859c77ede
S: 7e4145fc2d0e7ed4eae352988a6f6ce727e961b5 192.168.73.50:6379
   replicates e3e856a7b69bff9830dbde43389accdd35e69808
S: 3c0cb9d3b6e897fa98e3519d86c18e7724d96ca2 192.168.73.60:6379
   replicates 93cb88f8ef0702f09af6ee6147f17a65282d84d7
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
....
>>> Performing Cluster Check (using node 192.168.73.10:6379)
M: e3e856a7b69bff9830dbde43389accdd35e69808 192.168.73.10:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 3c0cb9d3b6e897fa98e3519d86c18e7724d96ca2 192.168.73.60:6379
   slots: (0 slots) slave
   replicates 93cb88f8ef0702f09af6ee6147f17a65282d84d7
S: 7e4145fc2d0e7ed4eae352988a6f6ce727e961b5 192.168.73.50:6379
   slots: (0 slots) slave
   replicates e3e856a7b69bff9830dbde43389accdd35e69808
S: 259cf1fa747e04cb26f48a9b7337f3b328f6d3fa 192.168.73.40:6379
   slots: (0 slots) slave
   replicates 0b54b026e3a10a667448bfc8a694de5859c77ede
M: 93cb88f8ef0702f09af6ee6147f17a65282d84d7 192.168.73.20:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
M: 0b54b026e3a10a667448bfc8a694de5859c77ede 192.168.73.30:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

主从数据库验证

[root@Master1 ~]# redis-cli -h 192.168.73.20 -p 6379 -c
192.168.73.20:6379> set score 100
-> Redirected to slot [5176] located at 192.168.73.10:6379
OK
192.168.73.10:6379> quit

[root@Master1 ~]# redis-cli -h 192.168.73.30 -p 6379 -c
192.168.73.30:6379> get score
-> Redirected to slot [5176] located at 192.168.73.10:6379
"100"

192.168.73.10:6379> cluster info  ###查看集群状态
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:1
cluster_stats_messages_ping_sent:161
cluster_stats_messages_pong_sent:180
cluster_stats_messages_sent:341
cluster_stats_messages_ping_received:175
cluster_stats_messages_pong_received:161
cluster_stats_messages_meet_received:5
cluster_stats_messages_received:341

192.168.73.10:6379> cluster nodes  ###查看节点信息
3c0cb9d3b6e897fa98e3519d86c18e7724d96ca2 192.168.73.60:6379@16379 slave 93cb88f8ef0702f09af6ee6147f17a65282d84d7 0 1605022024161 6 connected
7e4145fc2d0e7ed4eae352988a6f6ce727e961b5 192.168.73.50:6379@16379 slave e3e856a7b69bff9830dbde43389accdd35e69808 0 1605022022148 5 connected
259cf1fa747e04cb26f48a9b7337f3b328f6d3fa 192.168.73.40:6379@16379 slave 0b54b026e3a10a667448bfc8a694de5859c77ede 0 1605022022000 4 connected
93cb88f8ef0702f09af6ee6147f17a65282d84d7 192.168.73.20:6379@16379 master - 0 1605022023155 2 connected 5461-10922
e3e856a7b69bff9830dbde43389accdd35e69808 192.168.73.10:6379@16379 myself,master - 0 1605022023000 1 connected 0-5460
0b54b026e3a10a667448bfc8a694de5859c77ede 192.168.73.30:6379@16379 master - 0 1605022021000 3 connected 10923-16383

需要注意的现象
1.因为架构特性一对主从中只能挂掉一台 呢么slave可以接替master的位置 但是如果2台同时宕机 呢么将丢失呢对主从哈希槽中的所有数据，导致数据的完整性缺失，所以此架构虽然有冗余性 但是可靠性不是很高。

TheRichCat
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis： 集群部署
m0_73915763的博客
08-25 2620
Redis 基于 C 语言开发，故编译源码需要 GCC（Linux下的一个编译器，这里需要用来编译.c文件）的支持。假设某个主节点故障，其所有子节点会广播一个数据包给集群里的其他主节点来请求选票，一旦某个从节点收到了大多数主节点的回应，那么它就赢得了选举，被推选为主节点，负责处理之前旧的主节点负责的哈希槽。依据 Redis Cluster 内部故障转移实现原理，Redis 集群至少需要 3 个主节点，而每个主节点至少有 1 从节点，因此搭建一个集群至少包含 6 个节点，三主三从，并且分别部署在不同机器上。
Redis集群部署
weixin_43148691的博客
06-11 9014
Redis集群部署方案
Redis基础应用篇-快速面试笔记（速成版）
最新发布
zhaohongfei_358的博客
04-23 355
1. Redis简介 2. Redis常用命令 3. Java操作Redis 3.1 Jedis客户端 3.2 Lettuce客户端 3.3 Redission客户端 3.4 SpringBoot中使用RestTemplate 3.5 Jedis/Lettuce/Reddision的比较 4. Redis的典型应用 4.1 SpringBoot使用Redis进行数据缓存 4.2 Redis实现分布式锁 5. Redis常见的应用问题 5.1 缓存与数据库的一致性 5.2 缓存击穿（Cache Breakdo
Redis集群部署教程详解
Yel_Liang的博客
08-03 4004
Redis集群部署教程详解 ，节点故障后集群会有什么变化
SpringBoot集成Redis集群
09-28
SpringBoot集成Redis集群 在本文档中，我们将指导您如何在SpringBoot 2.X中集成Redis集群。下面是相关的知识点： 集成Redis集群的必要性 在实际应用中，使用Redis集群可以提高系统的可扩展性和可靠性。Redis集群...
redis集群批量插入
11-23
本文将详细讨论如何在Java环境下连接Redis集群并实现批量插入String类型的数据。 首先，我们需要理解Redis集群的基本概念。Redis集群是通过分片（Sharding）技术来分散数据到多个节点，每个节点存储一部分数据。在...
Redis集群配置文件
12-27
Redis集群配置文件，包含了三个主节点，三个从节点的配置文件，该配置是在docker中运行，有完整的docker-compose.yml文件，只要修改映射的宿主机的路径为你自己的路径。然后直接docker-compose up既可以完成环境启动...
springcloud部署redis集群
09-20
在SpringCloud框架中，部署Redis集群是实现高可用、数据持久化和分布式缓存的关键步骤。Redis是一款高性能的键值数据库，广泛应用于缓存、消息队列等多种场景。SpringCloud通过集成Spring Data Redis模块，使得在...
redis集群windows启动脚本
06-18
在Windows环境下，设置和管理Redis集群可能相对复杂，但通过编写启动脚本可以实现一键启动，简化操作流程。以下将详细介绍如何创建并使用“redis集群windows启动脚本”。 1. **Redis集群概念** Redis集群是Redis...
SpringCloud微服务+Redis5集群分布式:零基础到项目实战(速成班)
06-13
【课程目标】 你将快速掌握SpringCloud的研发和Redis5 cluster的一键启动，实战派 适用人群 速成类研发体系：适合零基础的同学或者对SpringCloud微服务想快速掌握的同学，非理论派 【适用人群】 1. 零基础到快速上手研发，而非理论/原理性讲解；告别繁琐的原理,直接上手的手把手整合实战课； 2. 适合零基础的同学或者对SpringCloud微服务想快速掌握的同学,有SpringCloud经验的同学不适用本课； 3. 本课都是从商业项目中剥离出来的例子，都是一线的技术企业级的技术,也是目前最流行的技术。 【运行展示】
Redis 集群部署
weixin_42023748的博客
07-28 651
Redis 3.0版本后正式推出Redis集群模式，该模式是Redis的分布式的解决方案，是一个提供在多个Redis节点间共享数据的程序集，且Redis集群是去中心化的，它的每个Master节点都可以进行读写数据，每个节点都拥有平等的关系，每个节点都保持各自的数据和整个集群的状态。
Redis（主从复制、哨兵模式、集群）概述及部署
Lsssss123的博客
07-04 2387
主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(Master)，后者称为从节点(Slave)；数据的复制是单向的，只能由主节点到从节点。默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点(或没有从节点)，但一个从节点只能有一个主节点。
redis集群部署详细教程
m0_65818274的博客
02-23 708
Redis集群是Redis官方在3.0版本推出的一套分布式存储方案，完全去中心化，由多个节点组成，所有节点彼此互联。Redis客户端可以直接连接任何一节点获取集群中的键值对，不需要中间代理。如果该节点不存在用户所指定的键值，其内部会自动把客户端重定向到键值所在的节点。Redis集群是一个网状结构，每个节点都通过TCP连接跟其他每个节点连接。在一个有N个节点的集群中，每个节点都有N-1个流出的TCP连接，和N-1个流入的连接，这些TCP连接会永久保持。
Redis部署方式（一）四种部署方式介绍
w_t_y_y的博客
02-20 2079
主从模式是三种模式中最简单的，在主从复制中，数据库分为两类：主数据库(master)和从数据库(slave)。- slave挂了不影响其他slave的读和master的读和写，重新启动后会将数据从master同步过来；- master挂了以后，不影响slave的读，但redis不再提供写服务，master重启后redis将重新对外提供写服务；部署、Redis哨兵模式部署、Cluster集群模式部署，后面三种（redis的四种部署方式： Redis单机模式部署、数据丢失----大灾难。开启多Redis进程。
Redis速成
m0_53978900的博客
10-23 297
Redis基础操作
Redis基础——非关系型数据库（NOSQL）介绍、Redis 基础、使用Jedis 操作Redis
Lemon
08-27 507
一、概述
Redis集群搭建与运维指南
"该文档是关于Redis集群搭建的详细指南，涵盖了从Redis的基本概念到集群配置、运维操作、命令详解以及调优等多个方面。" 在深入探讨Redis集群搭建之前，我们先来理解一下Redis和Redis-cluster。Redis是一个开源的、...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值