分布式寻址算法

本文介绍了分布式寻址中的Hash算法,包括普通Hash寻址、一致性Hash及其解决的动态扩缩容问题,以及虚拟节点的概念。普通Hash在增减节点时可能导致大量数据迁移,而一致性Hash通过哈希环来改善这一问题,但可能产生缓存热点。虚拟节点进一步优化了节点分布,减少数据迁移量。最后,引入了hash slot的概念,以提高负载均衡和故障容忍度。
摘要由CSDN通过智能技术生成

Hash

  亦称作散列或杂凑

  一种压缩映射

    散列值的空间通常远小于输入的空间

    不同的输入可能会散列成相同的输出

        碰撞

                无法从散列值来确定唯一的输入

  场景

    文件校验

        数字指纹 md5 命令可校验文件的完整性(并不意味着未被篡改)

    数字签名

    分布式寻址

  算法

    MD5

    SHA家族

普通 hash寻址

  shard = hash(id_or_key) % number_of_primary_shards

  适合

    分区或节点数量固定(取模右边的数固定)

  不足

    增减节点须搬大量数据(n1/n2, n1为扩容前的节点,n2 为扩容后的节点)(又称缓存重建,重新生成缓存数据)

一致性hash  

    将 node进行 hash,这能确定每个节点在哈希环上的位置

    对待保存的 key,首先计算 hash 值,并确定此数据在环上的位置, 从此位置沿环顺时针“行走”,遇到的第一个 node节点就是 key 所在位置

    一致性

        新加节点对已有节点的影响一致

  初衷</

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值