分布式架构 高并发下分布式缓存

本文详细介绍了高并发环境下如何利用分布式缓存(如Redis)来减轻数据库压力,通过先从缓存查询数据,再若未命中则通过过滤器(布隆算法)验证数据有效性,最后从数据库获取并回填缓存。同时,讨论了缓存架构中的哈希算法和服务器分布,以及应对服务器增减的数据迁移策略,以解决数据倾斜问题。此外,还深入探讨了布隆过滤器的实现原理,它在节省存储空间的同时,能有效避免假阳性错误。
摘要由CSDN通过智能技术生成

目录

1、高并发下分布式缓存实现原理

2、缓存部分的架构思想

3、过滤器的布隆算法实现原理


1、高并发下分布式缓存实现原理

        客户端访问数量庞大对于单一的服务器数据库来说会造成很大的开销甚至崩溃,但实现如图所示原理的高并发缓存架构便可有效的解决该问题。

        具体实现思路是:首先客户端访问服务器时,服务器先从非关系型数据库Redis里快速查找数据,当数据在缓存了未找到时,再由访问缓存转向访问关系型数据库如mysql,但在此期间不可直接访问需要先通过过滤器,确认该数据的可查找性以后,再到数据库了查找,然后将数据返回给缓存存储以便下次查找直接从缓存了拿到,最后将数据返回给客户端。这样大大减小了数据库开销。


2、缓存部分的架构思想

        hash算法将缓存进行合理分配,如图所示划分缓存:

         当增加或减少缓存服务器时,会发送数据库迁移,常见问题是服务器泛洪和数据倾斜(即缓存分配不合理),解决方法如图所示:

        这里我们把redis虚拟成n个结点分布在hash环上。


3、过滤器的布隆算法实现原理

实现思路如图:

 布隆算法详见:布隆算法 - Rick.lz - 博客园

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值