缓解缓存击穿的大杀器之---singleflight深入浅出

最新推荐文章于 2025-04-07 22:08:00 发布
原创 最新推荐文章于 2025-04-07 22:08:00 发布 · 922 阅读 · 3 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#缓存

singleflight是一个库，提供重复函数调用抑制，防止并发中多次调用同一函数。它能减少数据库压力，适用于缓存击穿场景，还可与分布式锁配合减少锁竞争。底层实现利用互斥锁、map和WaitGroup实现同步与阻塞。

singleflight简单介绍

singlefight直译“单飞”，那顾名思义就是有一堆鸟，但是咱只让一只鸟单飞。。。😄

singleflight
提供了重复函数调用抑制机制，使用它可以避免同时进行相同的函数调用。第一个调用未完成时后续的重复调用会等待，当第一个调用完成时则会与它们分享结果，这样以来虽然只执行了一次函数调用但是所有调用都拿到了最终的调用结果。

singleflight使用场景

singleflight设计模式能够有效减轻对数据库的压力。

singleflight:在有多个goroutine试图去数据库加载同一个 key对应数据的时候，只允许一个goroutine过去查询，其它都在原地等待结果。

对数据库的压力本来是跟QPS相当，变为跟同一时刻不同key的数量和实例数量相当。例如同一个时刻需要加载十个不同key 的数据，应用部署了三个实例，那么对数据库的压力就是10* 3。

热点越集中的应用，效果越好。

image.png

而对于缓存击穿的情况
↓：

image.png

使用singleflight也能让同一时间大量相同的请求进行阻塞等待而只让第一个去实际执行~

singleflight的作用是非常广泛的，其他的场景咱们需要进行这样的限流都可以考虑一下这种设计的使用。了解过分布式锁的各位都知道，分布式锁主要是用来对分布式系统一致性问题的一个“并发更新”的解决。而分布式锁加上来由于锁的竞争往往会使得整个系统变得很慢，那我们完全可以考虑singleflight配合上分布式锁一起使用来减少锁竞争的压力

image.png

在单机中我们就通过singleflight来竞争出一个优胜者然后再与别的集群去竞争锁，这样我们就可以将大量的锁竞争减少为节点之间的锁竞争~

而singleflight的具体使用大家可以自行去看文档，用起来还是相对

最低0.47元/天 解锁文章
B_rownJay
关注
基于single flight来解决缓存击穿
zhanghailang1的博客
06-17 1060
基于single flight的方式解决缓存击穿
通过 SingleFlight 模式学习 Go 并发编程
我心飞翔
04-25 561
在go-zero中SingleFlight的作用是：将并发请求合并成一个请求，以减少对下层服务的压力。
SingleFlight模式
我这个代码你能看懂吗？
08-23 608
通过使用和，我们可以在Java中实现SingleFlight模式，有效地减少对同一资源的重复请求，提高系统性能。
赏析Singleflight设计
qq_39397165的博客
07-15 499
前言哈喽，大家好，我是asong。今天想与大家分享一下singleflight这个库，singleflight仅仅只有100多行却可以做到防止缓存击穿，有点厉害哦！所以本文我们就一起来看一...
10.go开源groupcache项目笔记——singleFlight
热门推荐
badman250的专栏
09-27 1万+
10.go开源groupcache项目笔记——singleFlight 1      singleFlight 这个包主要实现了一个可合并操作的接口 1.1     先定义一个回调函数结构call type call struct {     //类似java的CountdownLatch的     wg  sync.WaitGroup     // 回调函数     val
使用Golang的singleflight防止缓存击穿的方法
09-17
### 使用Golang的singleflight防止缓存击穿的方法 #### 缓存击穿问题解析 在高并发场景下，缓存系统是提升应用性能的重要手段之一。然而，当某个热门数据项（通常由一个特定的key标识）在缓存中过期时，如果恰好有...
缓存击穿的现象及解决方案.pdf
03-07
缓存击穿，又称热点Key问题，是分布式系统中常见的问题之一。这种现象通常发生在高并发环境下，当某个或某些热点Key（即那些频繁被访问的数据项）在缓存中的存储时间到期而失效时，所有对这些Key的访问请求会瞬间...
《深入浅出SSD》-专用SSD存储
u013201718的博客
11-07 2378
本文章大部分内容来源自《深入浅出SSD》第2版，会有小部分内容来自于搜索（为了更深入的理解）和自己的理解。即用于个人的学习笔记。本章将重点介绍可计算存储设备和航天存储设备，以及其中设计的专用SSD。
singleflight---防缓存穿透利器
a...Z
09-28 1593
SingleFlight 总结 提供了三个参数Do同步通知、Dochan异步chan通知、Forget删除map的存在的键值 每次调用都会重置map 结构体是由mu sync.Mutex、m map[string]*call组成，mu用于操作的排它锁，m用于存储已有的键值的个数 如果m中存在当前键值对，就会阻塞等待，不存在的时候会加创建call结构存入m中 Dochan会异步执行，将结果放入chan通知其他阻塞的协程 阻塞的协程永的WaitGroup实现 do 的简单使用 package main i
【缓存击穿】Java的“SingleFlight”解决方案
最新发布
weixin_42430947的博客
04-07 580
Golang中的SingleFlight能很好地解决缓存击穿问题
go-singleflight
08-04
单飞 受到 Golang singleflight 类的高度启发。 Singleflight 类将同时保存所有函数调用，只执行一次源函数，然后将结果复制给其他函数。 Singleflight 有这些功能 像往常一样调用异步/同步函数/处理异常 100% 测试覆盖率 示例代码 import SingleFlight from 'go-singleflight' ; const key = "id-for-source-function" const singleFlight = new SingleFlight ( ) const sourceFn = async function VeryExpensiveOperation ( ) { ... } // specify key and source function to protect const protectFn = sin
golang- single_flight
weixin_38805083的博客
08-31 728
数据结构 type Group struct { mu sync.Mutex // 互斥锁，保证并发安全 m map[string]*call // 存储相同的请求，key是相同的请求，value保存调用信息。 } map是懒加载，其实就是在使用时才会初始化 mu是互斥锁，用来保证m的并发安全 type call struct { wg sync.WaitGroup // 存储返回值，在wg done之前只会写入一次 val interface{} // 存储返回的错误信息
Golang | 并发编程之 singleflight
雨下一整晚real的博客
11-12 1167
singleflight 可以实现请求抑制，是预防缓存击穿的有力工具；singleflight 主要利用 mutex+waitGroup 实现请求阻塞，利用 map 缓存请求结果；注意使用 singleflight 的阻塞问题（添加超时控制）与错误问题（定期通过 Forget 刷新 key）；
go并发编程 —— singleflight设计模式
qq_39383767的博客
04-04 528
singleflight是一种并发编程设计模式，将的多个并发请求成一个请求，以减少对下游服务的压力。
Go 并发控制：singleflight 详解
Go中国
11-27 909
singleflight 是 Go 官方扩展库 x 中提供的扩展并发原语，能够将多个并发请求合并为一个，降低服务端压力。本文就来介绍下它的用法和实现原理。请求合并singleflight 主要用于抑制重复的并发调用，从而避免对同一资源进行重复操作，提升系统性能。比如，当我们有多个 goroutine 并发调用一个同一个函数时，singleflight 能够实现只让一个 goroutine 发起调用...
[go语言]-深入理解singleflight
博客
09-20 2071
文章目录@[toc]前言singleflight使用场景singleflight 简介singleflight的使用从singleflight的test探寻最简单用法验证并发重复请求singleflight的原理callGroupDo 函数参考你的鼓励也是我创作的动力 Posted by 微博@Yangsc_o 原创文章，版权声明：自由转载-非商用-非衍生-保持署名 | Creative Commons BY-NC-ND 3.0 前言 最近从java转到go，来公司第一个开发工作就是对一个资源请求去
singleflight解决缓存击穿与源码分析
清风
01-19 989
singleflight解决缓存击穿与源码细节缓存击穿模拟演示被击穿singleflight解决源码分析注意事项singleflight Do方法原理总结 缓存击穿 在高并发的场景下，出现同一时刻有大量的请求同时查询一个key时，恰好在这个时候这个缓存key过期失效了，那么这些大量的请求转发到数据库DB上，高并发的对这一个key进行请求，就像水滴石穿一样，瞬间请求量给到DB，可能会把DB打死。 解决办法： 让热key永远不过期，定期去刷新数据就可以了。 为了避免出现缓存击穿的情况，可以在第一个请求去查询数
groupcache源码分析（四）-- singleflight
Mr.Buffoon
11-06 1148
singleflight.go文件中是singleflight模块的代码，这主要是进行相同访问的一个合并操作。也就是说，如果对于某个key的请求已经存在并且正在进行，则对该key的新的请求会堵塞在这里，等原来的请求结束后，将请求得到的结果同时返回给堵塞中的请求。 该部分就封装了一个接口： func (g *Group) Do(key string, fn func() (interface{}, ...
singleflight 设计与实现
Go中国
04-20 395
概述singleflight 提供了一套函数重复调用时的抑制机制，经常用来限制并发访问下的重复请求。例如一个比较常见的场景是使用 singleflight 来限制同一个缓存 key 的重复请求，避免发生 缓存击穿 时，避免请求全部落到数据库，减少性能影响和宕机风险。singleflight 示意图示例参考 《Go 高性能 - singleflight 防止缓存击穿》。内部实现我们来探究一下 gol...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值