redis中分片和哨兵的简要说明以及Hash一致性算法

最新推荐文章于 2024-10-03 00:40:45 发布
最新推荐文章于 2024-10-03 00:40:45 发布
阅读量4.7k 收藏 17
点赞数 3
文章标签： redis 分片 哨兵 hash的一致性算法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42552872/article/details/80976812
版权
本文介绍了Redis作为内存数据结构存储系统，支持多种数据类型。为了应对宕机风险，Redis采用分片策略，通过Hash一致性算法确保数据均匀分布在不同节点。分片具备均衡性、单调性、分散性和负载等特性。哨兵模式通过监控和自动故障转移，解决了分片的高可用性问题。当主机宕机，哨兵会选择新的主机并同步数据，实现集群的稳定运行。
摘要由CSDN通过智能技术生成

       首先我们先了解下什么是redis，redis是一个内存中的数据结构存储系统，它可以用作数据库，缓存和消息队列中间件使用，它支持多种数据类型，例如字符串，散列，列表，集合等等。redis是基于c语言编辑的，并且运行时在内存中，所以它的运算速度很快，可以达到30万/秒运算。

     redis为什么要分片呢？redis在整个处理流程中通常是用作数据库或者缓存的，当redis宕机的后，会影响整个流程的执行，因此我们将redis分片，所谓分片其实就是多部署几台redis，将数据尽可能的保存到不同的redis中，当一台redis宕机后只会影响一部分数据，redis分片的优点是可以实现内存的动态扩容，但是redis不能够实现高可用。那么当有多个redis的时候，传进来的数据如何决定存储在哪个redis中呢？在redis底层有一套算法叫做Hash一致性算法，在里面有这样几个特性。

 1.均衡性：

 尽可能的让信息数据均匀的落入不同的节点中，如果根据hash计算，获取的数据量不是均匀分片的则采用虚拟节点重新进行划分，直到数据达到均衡性的要求，虚拟节点的个数不唯一。

2.单调性 

如果节点发生了变化，那么数据可以实现动态的数据迁移，

最低0.47元/天 解锁文章
大号提莫啊
关注
Redis 基本概念: 内存数据库、数据类型、集群、哨兵、管道
AI天才研究院
08-03 1061
1.Redis 是什么？Redis 是一种开源（BSD许可）的高性能键值对存储数据库。它支持多种数据结构，如字符串(strings)、散列(hashes)、列表(lists)、集合(sets)及排序集(sorted sets)。这些数据结构都支持 push/pop、add/remove 及取交集并差集和交集数量等复杂的操作。Redis 内置了复制、LUA脚本、LRU驱动事件、事务和不同级别的磁盘持久化，在Volatile Memory的数据分析领域也经常使用到。
Redis --- 哨兵、分片集群
乌云的博客
05-05 891
Redis提供了哨兵（Sentinel）机制来实现主从集群的自动故障恢复。
redis的分片机制和哨兵机制
gja586974的博客
11-16 1173
redis分片机制 redis在整个处理流程中通常是用作数据库或者缓存的，当redis宕机的后，会影响整个流程的执行，因此我们将redis分片，所谓分片其实就是多部署几台redis，将数据尽可能的保存到不同的redis中，当一台redis宕机后只会影响一部分数据，redis分片的优点是可以实现内存的动态扩容，从而解决海量数据存储的问题，但是redis不能够实现高可用。 那么当有多个redis的时候，传进来的数据如何决定存储在哪个redis中呢？在redis底层有一套算法叫做Hash一致性算法: 一般的h
一致性hash算法
ZERO
07-10 883
转载自：http://blog.csdn.net/lovingprince/article/details/4645448               http://blog.csdn.net/caigen1988/article/details/7708806               http://blog.csdn.net/cywosp/article/details/23397179
Redis-哨兵
最新发布
qq_74812898的博客
10-03 1430
哨兵机制
一致性哈希算法是分布式系统中常用的算法
qwe7818的博客
11-10 205
一致性哈希算法是分布式系统中常用的算法。比如，一个分布式的存储系统，要将数据存储到具体的节点上，如果采用普通的hash方法，将数据映射到具体的节点上，如key%N，key是数据的key，N是机器节点数，如果有一个机器加入或退出这个集群，则所有的数据映射都无效了，如果是持久化存储则要做数据迁移，如果是分布式缓存，则其他缓存就失效了。     因此，引入了一致性哈希算法： 把数据
Redis单机，主从集群，哨兵集群，分片集群的搭建
weixin_44991304的博客
10-07 1103
Redis集群 本章是基于CentOS7下的Redis集群教程，包括： 单机安装Redis Redis主从 Redis分片集群 1.单机安装Redis 首先需要安装Redis所需要的依赖： yum install -y gcc tcl 然后将课前资料提供的Redis安装包上传到虚拟机的任意目录： [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-vosF8eXQ-1633604276640)(assets/image-20210629114325516.png)] 例如，我
Redis -- 11 -- 一致性哈希算法
Gene Xu
09-06 467
一致性哈希算在 1997 年由麻省理工学院提出，是一种特殊的哈希算法，目的是解决分布式缓存的问题 一、一致性哈希算法 一致性哈希算法将哈希值空间组织成一个虚拟的圆环 假设将某个哈希函数 H 的值空间为 0-2^32-1 (因为哈希值通常是一个 32 位的无符号整形) 我们将这个由 2^32 个点组成的圆环称为哈希环 接着对 key 进行哈希运算得到哈希值 (可以选择服务器的 IP 或主机名作为关键值进行哈希运算)，这样每台服务器就可以确定其在哈希环上的位置 假设有 NodeA、N
[redis]知识回顾之redis主从+哨兵搭建简要记录
百物易用是苏生
01-01 995
1.先准备环境 家里的万年老爷机(120G的SSD，300G硬盘 )，手机热点下载，所以只能少利用空间资源，用virtualBox装centos7纯净版 其中要点： 1.virtualbox创建新机要用动态分配的虚拟磁盘(我选的默认8G)，virtual就300M并没有自带的linux，需要去下载centos7的镜像文件，最小版的大概1G， 个人用阿里云镜像站点更快：http://mirrors.aliyun.com/centos/7/isos/x86_64/ 附官网的：http://isored
SpringBoot使用Redis 数据访问(单点、集群、哨兵、连接池、Pipline、分布式框架Redisson、解决方案)
纸上得来终觉浅，绝知此事要躬行
04-29 2268
Redis操作是单线程的，使用连接池可以减少连接的创建，redis连接池有两种方式:Jedis(JedisPool) 和 Lettuce(LettucePool)。Lettuce 和 Jedis 的定位都是Redis的client，所以他们当然可以直接连接redis server。在Lettuce和Jedis之外还有Redission ，Redisson：实现了分布式和可扩展的Java数据结构。...
redis和sqlserver数据同步_数据库和redis同步数据
weixin_30359265的博客
12-30 2548
Redis主从复制1、什么是主从复制Redis持久化保证了即使redis服务重启也不会丢失数据，因为redis服务重启后会将硬盘上持久化的数据恢复到内存中，但是当redis服务器的硬盘损坏了可能会导致数据丢失，如果通过redis的主从复制机制就可以避免这种单点故障，如下图：说明：主redi...文章~信~仰~2016-09-034399浏览量Redis主从复制看这篇就够了什么是主从复制持久化保证了...
【redis】一致性哈希算法
Free_Ya的博客
05-01 2320
前言 这周复习redis，被集群和分布式搞得头大，也接触到一致性哈希算法， 因此博主进行了一定得学习，故，写下这篇文章。 一、普通哈希算法 普通得哈希算法是对服务器得数量进行一定得取模预算得出，常见得公式如下: index = hash(key)%N N就是服务器得数量。 我们可以想象到，如果服务器数量改变，那么index也会进行改变。例如： 一台服务器宕机，服务里器的数据暂时丢失（系统会进行一定的备份,用户发送的请求经过哈希运算后,因为N的改变，会访问其他的服务器，但是该台服务器还没有拷贝过来宕机的数
redis 一致性哈希算法
qinxinhe7的博客
02-18 459
💝💝💝欢迎来到我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。💝💝💝 ✨✨ 欢迎订阅本专栏 ✨✨。
Redis：一致性Hash算法
热门推荐
Master-TJ的个人博客
05-09 1万+
1. 前言 在Redis 集群模式Cluster中，Redis采用的是分片Sharding的方式，也就是将数据采用一定的分区策略，分发到相应的集群节点中。但是我们使用上述HASH算法进行缓存时，会出现一些缺陷，主要体现在服务器数量变动的时候，所有缓存的位置都要发生改变！具体来讲就是说第一当缓存服务器数量发生变化时，会引起缓存的雪崩，可能会引起整体系统压力过大而崩溃（大量缓存同一时间失效）。第二当缓...
redis系列之——一致性hash算法
诸葛小猿
07-13 1万+
一致性hash算法你了解吗？什么时候使用？解决什么问题？redis集群模式使用了一致性hash算法了吗？ 数据分片（sharding） 分布式数据存储时，经常要考虑数据分片，避免将大量的数据放在单表或单库中，造成查询等操作的耗时过长。比如，存储订单数据时使用三个mysql库（编号0,1,2），当一条订单数据过来时，对订单id求hash后与机器数量取模，hash(orderId) % 3，假如得到的结果是2，则这条数据会存储到编号为2的mysql中。分表分库存储时，根据数据库的主键或唯一键做hash，然后跟
一致性哈希算法 mysql_Redis的一致性哈希算法
weixin_42302418的博客
01-30 179
## 一.节点取余根据redis的键或者ID,再根据节点数量进行取余。key：value如下name:1 zhangsna:18:北京对name:1 进行hash操作，得出来得值是2423423452，用这个值除3，余1则放到1号节点中进行存储，余2则放到2号节点存储。## 二.一致性hash一致性哈希分区(Distributed Hash Table) 实现思路是为系统中每个节点分配一个toke...
【Redis】10.哨兵模式与分片集群
沉迷写代码的程序猿的博客
11-08 1075
有了这些信息后，哨兵就会记住这些节点的拓扑信息，在后续发生故障时，选择合适的slave节点进行故障恢复。如图，在7001这个节点执行set a 1时，对a做hash运算，对16384取余，得到的结果是15495，因此要存储到103节点。这是基于redis提供的发布（pub）/订阅（sub）机制完成的，客户端可以从哨兵订阅消息，故障转移后，客户端会收到订阅消息。:hello"频道发送自己的信息（IP 和端口），其他订阅了该频道的哨兵节点就会获取到该哨兵节点信息，从而哨兵节点之间互知。
Redis进阶学习之哨兵模式和分片集群
boo程序员的博客
05-17 848
4. Redis哨兵模式 在主从复制我们知道slave节点宕机恢复后可以找master节点同步数据，那master节点宕机就需要另外一种方式了。Redis提供了哨兵（Sentinel）机制来实现主从集群的自动故障恢复。 4.1. Sentinel的三个作用 1. 监控：Sentinel 会不断检查您的master和slave是否按预期工作 2. 自动故障恢复：如果master故障，Sentinel会将一个slave提升为master。当故障实例恢复后也以新的master为主 3. 通知：Sentinel充当
Redis-Hash一致性算法
WangLi1201的博客
05-13 975
背景 举例说明： Redis实例：cs1，cs2，cs3 需存储的数据：10000条商品数据 数据与Redis实例的映射方法： hash(商品数据Key) % （Redis实例的个数） 这样，我们就可以将10000条数据利用hash并取模的形式存储到对应的Redis实例中。 这样会出现一个问题，Redis实例的个数可能是变化的，当增加或减少实例时，映射就会改变，若数据量大，将会出现大批量redis请求找不到的情况，会造成缓存击穿甚至缓存雪崩。Hash一致性算法能在一定程度上解决这个问题。
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值