怎么解决Redis中的大Key问题

Ploris.

已于 2024-07-24 22:02:23 修改

阅读量168

点赞数 2

分类专栏： Redis 文章标签： redis 数据库缓存

于 2024-07-24 21:59:59 首次发布

本文链接：https://blog.csdn.net/weixin_64708777/article/details/140674097

版权

Redis 专栏收录该内容

3 篇文章 0 订阅

订阅专栏

1.什么是大key

Redis中存储了大量数据的key，通常出现在String,list,hash,set,zset

例子：在利用好友实现朋友圈功能时，某个用户添加了大量的好友，每个好友发送文章时，都会将文章推送给该用户，就会造成该key特别大

2.大Key存在的危害

由于Big key的values占用的内存很大，所以读取速度会很慢
会大量占用Redis内存，造成其他数据无法存储，可能会导致Redis卡住
会影响Redis集群，造成节点之间内存分布不均
影响Redis的备份和恢复，例如从RDB文件中，需要花费大量时间
搜索，迁移，删除困难

3.怎么识别big key

在控制台输入redis-cli-bigkeys可以识别大key

4.怎么处理大key

有选择的删除big key，删除那些访问频率较低的
设置合理的过期时间
将Big key进行拆分,或者使用小键替代大键
使用Cluster集群模式，将big key分散到不同的节点上，加快响应速度
部分迁移，存放在单独的Redis中

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Ploris.

关注关注

2
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

redis中的大key问题

qq_35693377的博客

05-11

1380

设置过期时间：为数据设置TTL（Time To Live），使得旧数据可以自动被清理，防止无限制地增长。数据分页处理：如果应用场景允许，通过分页方式只加载需要的部分数据，而不是一次性加载整个key。客户端缓存：对于读多写少的数据，可以考虑在客户端进行缓存，减少对Redis的访问压力。负载均衡：对于热点数据，考虑采用负载均衡策略，如一致性哈希等，以均衡各节点负载。评估数据模型：重新评估和设计数据模型，使用更适合的数据结构和存储策略。内存优化：优化数据存储格式，例如使用更紧凑的数据结构或者压缩数据。

Redis大Key问题的解决方案

m0_64469199的博客

06-13

1599

Redis中某些键（key）所对应的值（value）特别大，或者集合类数据结构（如hash、set、zset、list）中存储的元素数量过多，这就是大Key问题。具体大小标准依据业务场景不同而有所变化，一般认为在普通业务场景下，如果单个String类型的value大于1MB，或者在高并发低延迟场景中大于10KB，就可能被视为大Key。

参与评论您还未登录，请先登录后发表或查看评论

Redis大Key风险和改造

程序猿进阶

08-20

1551

优质博文。

Redis中的BigKey如何发现和处理

Venus's Blog

10-15

4万+

通常来说,如果一个键值对大于一定阈值(例如 1MB),它就可以被认为是一个大键或 bigkey。😊🙏如果大家对相关文章感兴趣，可以关注公众号"架构殿堂"，会持续更新AIGC，java基础面试题, netty, spring boot, spring cloud等系列文章，一系列干货随时送达!

如何解决Redis大key问题

CarryBest的博客

03-11

358

Redis大key的一些场景及问题大key场景 1、热门话题下评论、答案排序场景。 2、大V的粉丝列表。 3、使用不恰当，或者对业务预估不准确、不及时进行处理垃圾数据等。大key问题由于Redis主线程为单线程模型，大key也会带来一些问题，如： 1、集群模式在slot分片均匀情况下，会出现数据和查询倾斜情况，部分有大key的Redis节点占用内存多，QPS高。 2、大key相关的删除或者自动过期时，会出现qps突降或者突升的情况，极端情况下，会造成主从复制异常，Redis服务阻塞无法

Redis大key优化方案

weixin_33769207的博客

03-11

508

2019独角兽企业重金招聘Python工程师标准>>> ...

【redis的大key问题】

m0_50116974的博客

08-13

1437

在Redis中，大Key是指占用了较多内存空间的键值对。大Key的定义实际是相对的，通常以Key的大小和Key中成员的数量来综合判定，例如：注意：上述例子中的具体数值仅供参考，在实际业务中，您需要根据Redis的实际业务场景进行综合判断。本文介绍了大Key在Redis中的定义以及可能引发的问题。介绍了快速找出大Key的方法以及对于大Key的优化方案。通过合理的优化方案，可以提升Redis的性能和用户体验。希望本文对您有所帮助。如果有任何错误或建议，请随时指正和提出。

Redis热key和大key问题

qq_31603875的博客

10-19

1561

Redis 服务端收集：Redis 提供了 monitor 命令（也有现成的分析工具，比如redis-faina），可以统计出一段时间内的某 Redis 节点上的所有命令，分析热点 key，在高并发条件下，会存在内存暴涨和 Redis 性能的隐患，所以此种方法适合在短时间内使用；在redis数据库中有些访问量特别大的数据，比如热门商品信息、热门话题等，大量的请求去访问redis上的某个特定key，会造成流量过于集中，达到物理网卡或者内存上限，从而导致服务器宕机。数据分片，比如后面加序号，进行多实例的拆分。

Redis高频面试基本问题整理

热门推荐

张彦峰的博客

04-07

170万+

对Redis一些重点内容进行整理总结用于查缺补漏

Redis-大key解决策略

子悠のziyou

12-07

5372

首先大key不是key很大而是key对应的value值很大一般而言如果String类型值大于10KB，Hash，Set，Zset，List类型的元素的个数大于5000个都可以称之为大key使用时注意事项最好在从节点上执行该命令或者在Redis实例业务压力的低峰阶段进行扫描查询，因为key很多时会很慢不足之处使用SCAN命令对数据库进行扫描。然后用TYPE命令获取返回的每一个key的类型对于String类型，可以直接使用STRLEN命令获取字符串长度，也就是占用的内存空间字节数对于集合类型来说可以使用MEM

redis中热key问题该如何解决

01-19

今天我们换换口味，来写redis方面的内容，谈谈热key问题如何解决。其实热key问题说来也很简单，就是瞬间有几十万的请求去访问redis上某个固定的key，从而压垮缓存服务的情情况。其实生活中也是有不少这样的例子。...

Redis缓存及热点key问题解决方案

08-19

Redis缓存及热点key问题解决方案 Redis缓存是一种高效的缓存解决方案，用于加速应用程序的访问速度和降低数据库的负载。但是，Redis缓存也存在一些问题，例如热点key的问题。如果不妥善处理，可能会导致系统崩溃。...

redis 解决key的乱码问题,并清理详解

09-08

总结一下，解决Redis中key的乱码问题，关键在于正确配置序列化器，以及在删除乱码key时采取合适的策略。而在处理乱码问题的过程中，还需留心数据类型的转换和格式对齐，确保数据在序列化和反序列化过程中的一致性和...

Redis-发布/订阅交互模式

sq2048935747@163.com的博客

10-31

409

消息代理”（Message Broker）是一种软件组件，它在不同的应用程序之间传递消息。在Redis的上下文中，消息代理的功能允许Redis作为一个中间人，帮助应用程序之间进行异步通信。具体来说，Redis支持发布/订阅（pub/sub）模式，这是一种消息传递机制，其中一个或多个发布者（publishers）发送消息到一个频道（channel），而订阅者（subscribers）监听这些频道以接收消息。

CentOS 7系统下Redis Cluster集群一键部署脚本发布

运维人生

11-02

299

环境准备：自动安装Redis所需的依赖包，并下载Redis源码。Redis安装：编译并安装Redis。配置文件生成：为每个Redis节点生成独立的配置文件。Redis实例启动：根据配置文件启动Redis实例。集群创建：使用redis-cli命令创建Redis Cluster集群。本文提供了一个在CentOS 7系统下Redis Cluster集群的一键部署脚本，帮助开发者快速搭建Redis Cluster集群。未来，我们将继续完善该脚本，增加更多的功能和配置选项，以满足不同场景下的需求。

Java版企业电子招标采购系统源码Spring Cloud + Spring Boot +二次开发+ MybatisPlus + Redis

m0_66404702的博客

11-05

225

主要功能包含：招标公告管理、变更公告管理、终止公告管理、中标候选人公告管理、中标公告管理、采购公告管理、采购结果公告管理、单一来源采购结果公告管理。3、采购项目管理：可对项目采购过程全流程管理，包含功能有：评审人员的选取/抽取、基准价维护、供应商缴费审核、投标过程记录查询、供应商报价维护、项目评审查询、线下项目管理、采购计划制定与维护。主要功能包含：公告模板管理、评审人员管理、第三方机构管理、供应商管理、采购类别设置、评审模板管理、考核模板管理。主要板块包含：招标公告、非招标公告、系统通知、政策法规。

docker部署nginx+nacos+redis+java镜像和容器

xiaogg3678的专栏

11-01

911

docker部署nginx+nacos+redis+java镜像和容器

Redis的常用数据类型以及命令