Redis的sorted set数据结构实现仅保持一定数量的元素

最新推荐文章于 2024-07-09 19:16:21 发布
最新推荐文章于 2024-07-09 19:16:21 发布
阅读量3.9k 收藏
点赞数
分类专栏： Redis专辑
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/feeltouch/article/details/89694706
版权

实际场景

Redis的sorted set一个非常经典的使用场景做排行榜，排行榜通常仅仅需要前100，50， 20就可以了，如果将所有的数据都存储在sorted set的key中可能会导致key中的元素非常多，那么有没有一种简单的解决方案呢？其实，对于一些例如观看量、浏览量累积型数量非常大的场景，其对于数据的精确度要求相对较低，这是我们可以采用逐步逐出策略。

方案描述

每次请求排行榜数据时或者定时，执行如下命令删除一些长尾中几乎不可能来到排行榜中的数据元素，以此来保持sorted set始终有可控数据量的元素。具体执行如下：

1. ZCARD key #首先算出总数
2. ZREMRANGEBYRANK key start end #根据总数减去保留的，适当的就可以估算出要删除的区间start end
3. ZADD key score member #再把新的元素加进去

这三个命令组合使用，高并发引入 setnx incr 等分布式锁命令前

 

FeelTouch Labs
关注
专栏目录
Redis面试题分享四十一：一个 Redis 最多能存放多少的 keys? List、Set、Sorted Set 他最多能存放多少元素？
之乎者也·的博客
11-14 277
在理论上，Redis 可以存储的 keys 的数量是受限于可用内存的大小的。然而，Redis 的数据结构会占用一些额外的内存，所以可用的 keys 的数量通常会比单纯的内存大小要少一些。总的来说，Redis 的数据结构可以非常灵活地支持大量的数据和元素，但是具体的限制会根据你的数据大小和你的使用方式而变化。如果你需要存储大量的数据，那么最好在实际使用中对你的数据进行基准测试，以确保你的使用方式可以满足 Redis 的性能要求。但实际上，最大的限制因素取决于服务器的物理内存大小和操作系统的限制。
Redis + Lua 实现 sorted set 集合保证固定数量的数据，并保留新数据剔除旧数据
cainiao1412的博客
07-21 2187
场景：公司某个场景要求保留前20个最新的数据，用作查询展示，用MySQL每次频繁查询太耗费性能，所以用Redis处理一下。 直接上代码： local key = KEYS[1] -- 定义从参数中获取的key local value = ARGV[1] -- 定义从参数中获取的value local maxLen= tonumber(ARGV[2]) -- 定义从参数中获取的最大长度 local result = redis.call("ZCARD", key) -- 使用ZCARD获取key对应的集合最大
Redis 中Sorted Set 类型命令(命令语法、操作演示、命令返回值、时间复杂度、注意事项)
最新发布
Shine0115的博客
07-09 972
前面文章讲解了 Set 类型，Set 类型有一个特点，就是集合中的元素是唯一的。，依靠这个分数，就维护了集合中元素的有序性，什么意思呢，举个例子：在三国中，每一个武将都是有武力值的，我们根据武力值就可以对武将进行一个排名，如下图：在 zset 类型中，默认是按照**“升序”**的方式排列的，提供了一组获取元素分数、元素范围查询等等功能命令，下面就来介绍一些主要并且常用的命令。
【redis】仅存储 n 条最新记录。
MitKey的博客
03-21 7855
在某些场景下，有这样一个需求：只需要存储 100 条最新的记录，其他的数据保存。
redis特点
weixin_39016575的博客
10-11 153
优点 支持数据结构丰富 可以持久化-save 主从同步结构,便于容灾 内存数据库,速度快 缺点 单线程CPU利用不充分 实例利用不充分,需要多实例 淘汰 voltile-lru：从已设置过期时间的数据集（server.db[i].expires）中挑选最近最少使用的数据淘汰 volatile-ttl：从已设置过期时间的数据集（server.db[i].expires）中挑选将要过期的数据淘汰 volatile-random：...
Redis基础学习·第八期
阿Tin的博客
11-11 984
目录前言一、set类型二、set 类型数据的基本操作三、set 类型数据的扩展操作业务场景一业务场景二业务场景三业务场景四业务场景五四、set 类型数据操作的注意事项 前言 本文章基于黑马程序员Redis教学视频进行总结，仅作为学习所用，欢迎大家在评论区多多讨论 视频连接：B站黑马程序员Redis视频（点击跳转） 在Redis基础学习·第四期（点击跳转）中谈到Redis的五种基本数据类型，这期就来聊聊Redis中的set类型 一、set类型 新的存储需求：存储大量的数据，在查询方面提供更高的效率(lis
Redis基础篇4-list类型
qq_45179904的博客
11-24 370
list类型 数据存储需求：存储多个数据，并对数据进入存储空间的顺序进行区分 需要的存储结构：一个存储空间保存多个数据，且通过数据可以体现进入顺序 list类型：保存多个数据，底层使用双向链表存储结构实现 Redis存储空间（类似java双向链表） 先进后出，start 和 stop可以反方向查询， 添加/修改数据 lpush key value1 [value2] ... #执行lpush和rpush说明这是list rpush key va...
Node.js + Redis Sorted Set实现任务队列
10-21
本文会详细讲解如何使用Node.js结合Redis的Sorted Set数据结构来实现一个任务队列。 首先，我们需要理解Redis的Sorted Set数据结构。Sorted Set是一种有序集合，每个元素都会关联一个分数，集合会根据分数值来进行...
redis的sorted set实现延时队列
06-03
在本篇文章中，我们将深入探讨如何利用 Redis 的有序集合（Sorted Set）来实现一个延时队列，这在很多场景下都是非常实用的，比如消息推送、定时任务等。 延时队列是一种特殊的队列，它的特性是元素不是立即被处理...
Redis从入门到精通（10）：redis的sorted_set数据类型详解
01-20
Redis中的Sorted Set是一种非常重要的数据结构，它在Set的基础上增加了分数(score)的概念，使得集合中的元素可以根据分数进行排序。Sorted Set不仅提供了基本的增、删、查操作，还能执行基于分数的范围查询和条件...
redis 数据类型之有序集合(sorted set) 详细介绍
一个火星程序员的专栏
10-24 3952
Redis的有序集合（sorted set）同时具有“有序”和“集合”两种性质，这种数据结构中的每个元素都由一个成员和一个与成员相关联的分值组成，其中成员以字符串方式存储，而分值则以64位双精度浮点数格式存储。
01-VIP-Redis核心数据结构与核心原理1
08-03
总的来说，Redis凭借其高效的数据结构、单线程模型和IO多路复用技术，实现了高性能的键值存储服务。在实际应用中，理解这些核心概念和特性，可以帮助我们更好地设计和优化基于Redis的解决方案。
终于搞清楚了：redis最多能放多少个
当我谈编程时我谈些什么
10-09 3849
2^32大约42亿个，但官方只测试到了2.5亿个，一起来看一下官方文档 FAQ – Redis What is the maximum number of keys a single Redis instance can hold? and what is the max number of elements in a Hash, List, Set, Sorted Set? Redis can handle up to 2^32 keys, and was tested in practice
【Redis学习】：sortedset数据类型详解
life is wonderful
05-29 5449
sortedset数据结构 sortedset和set类型极为类似，它们都是字符串的集合，都不允许重复的成员出现在一个set集合中。它们之间的主要差别是sortedset中的每一个成员都会有一个分数（score）与之关联，redis正是通过分数来为集合指那个的成员进行从大到小的排序。然而需要额外指出的是尽管sortedset中的成员必须是唯一的，但是分数却是可以重复的。 在sorted
[转]Redis有序集内部实现原理分析
tpriwwq的专栏
08-12 1055
原文地址：  http://www.cnblogs.com/WJ5888/p/4516782.html Redis中支持的数据结构比Memcached要多的多啦，如基本的字符串、哈希表、列表、集合、可排序集，在这些基本数据结构上也提供了针对该数据结构的各种操作，这也是Redis之所以流行起来的一个重要原因,当然Redis能够流行起来的原因，远远不只这一个,如支持高并发的读写、数据的持久化
redis入门六（SortedSet数据类型及相关操作）
weixin_37711738的博客
05-04 804
redis sorted set介绍
一个 Redis 实例最多能存放多少的 keys？ List、Set、 Sorted Set 他们最多能存放多少元素
weixin_40426261的博客
05-15 686
flink技术学习与总结待续
RedisClient 报出java.net.SocketException: Broken pipe异常
热门推荐
FeelTouch Labs
12-20 1万+
问题场景： 读写数据量小时没有问题，当读写数据量大的时候偶尔会报出这个异常 原因分析：大数据操作时间较长，被redis server强行close了，超过redis server的某个值。 相关参数：minEvictableIdleTimeMillis 。线程中如果检测到当前连接的最后活跃时间和当前时间的差值大于 minEvictableIdleTimeMillis，则关闭当前连接 其他案...
Redis 集群到底支持不支持批处理指令MGET等
FeelTouch Labs
03-04 1万+
目前，这不是一个确定的答案，对于不同集群的实现方式其支持度也是不一样的 原生Redis Cluster 3.* 和 4.*版本集群 3.0 不支持，即使在某些客户端下返回了值，很可能仅仅只是某一个节点的值 4.0 仅支持相同slot，key不能保证在相同slot还是没用 参考：Redis 阿里云Redis Cluster 支持MGET MSET HMGET HMSET指令 受限MG...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

FeelTouch Labs

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值