rediskey值内存消耗以及性能影响

最新推荐文章于 2024-06-16 20:19:48 发布
最新推荐文章于 2024-06-16 20:19:48 发布
阅读量754 收藏 15
点赞数 10
分类专栏： 程序员 文章标签： 前端 javascript 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_84009837/article/details/137896160
版权
本文探讨了Redis中key数量对内存消耗的影响，分析了不同数量级（1千万，1千5百万）下内存使用情况。通过使用map和hset存储策略，展示了如何降低内存消耗，如将key打散存储能有效节省约200M内存。此外，进行了压力测试，GET操作达到34364.26请求/秒。内容还提及了Kafka的进阶知识点。
摘要由CSDN通过智能技术生成

一、redis key数量为1千万时。

二、redis key数量为1千5百万时。

三、redis key数量为一千五百万时压测

四、使用map将key值打散存储，小key为1千五百万

五、使用hset存储打散为256个key

六、进行hget的压力测试

七、总结

一、redis key数量为1千万时。

===================

存储value为"0"，比较小。如果value较大，则存储内存会增多

redis key数量为一千万时，使用了865M的内存。

Keyspace

db0:keys=11100111,expires=0,avg_ttl=0

内存使用情况

Memory

used_memory:907730088

used_memory_human:865.68M

used_memory_rss:979476480

used_memory_rss_human:934.10M

used_memory_pea

最低0.47元/天 解锁文章
2401_84009837
关注
  • 10
    点赞
  • 踩
  • 15
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Redis】 redis hash getKey getValue 两个的性能差别
九师兄
06-30 1726
1.概述 有个需求是我们要获取redis中的key的信息。 大概是这样的,key是IP，value是一个json字符串，但是我们只想要key信息。然后有如下代码。 构建60万的数据 @Test public void addeirdWData11() { JedisPool jedisPool = RedisGetKeyOrValue.initLocalRedispool(new Properties()); Jedis jedis = RedisGetKeyO.
Redis获取某个大key值的脚本实例
09-09
脚本的核心思路是通过增量迭代的方式，避免一次性加载整个大key值，减少内存和网络资源的消耗。 1. 脚本功能： 脚本可以扫描指定Redis key内的所有元素，根据key的类型（如list、hash、set或zset）采用不同的迭代...
Redis大Key导致性能下降及处理
热门推荐
Revivedsun的专栏
08-22 2万+
1.什么是大key Redis是一个key,value数据库。大key即Key存储的value非常大。当value为哈希表、集合、有序集或链表时指存储的元素过多（上万)。当value为字符串时一般指单个字符串超过1M。也包括Key数量极多的情况，例如key数量达到千万上亿的规模。 2.大key导致性能下降的原因 大key导致性能下降redis的结构相关，首先redis是一个key,value数据库...
redis-大key及影响
最新发布
startyangu的博客
06-16 439
Redis大Key其实并不是字面意思，不是指存储在Redis中的某个Key的大小超过一定的阈值，而是指该Key所对应的value过大。对于string类型来说，一般情况下超过10KB则认为是大Key，对于set，zset，hash等类型来说，一般数据超过5000条即认为是大Key。当Redis存储的Key过大时，会对Redis的性能产生负面影响，如内存使用率过高、写入和读取数据的速度变慢等。
Redis数据结构之快速列表-quicklist
dituo1205的博客
09-01 244
链表 在Redis的早期版本中，存储list列表结构时，如果元素少则使用压缩列表ziplist，否则使用双向链表linkedlist // 链表节点 struct listNode<T> { listNode *prev; listNode *next; T value; } listNode； ​ // 链表 struct l...
关于redis的keys命令的性能问题
sanmi8276的博客
11-24 598
KEYS pattern 查找所有符合给定模式pattern的key。 KEYS*匹配数据库中所有key。 KEYSh?llo匹配hello，hallo和hxllo等。 KEYSh*llo匹配hllo和heeeeello等。 KEYSh[ae]llo匹配hello和hallo，但不匹配hillo。 特殊符号用\隔开 NOTICE: KEYS 的速度非常快，但在一个大的数据库中使用它仍然可能造成性能问题，如果你需要从一个数据集中查...
Python获取Redis所有Key以及内容的方法
09-09
请注意，实际应用中应根据实际情况调整`pipe_size`，以平衡性能和内存使用。 总的来说，通过Python与Redis的交互，我们可以方便地获取Redis中的所有Key和内容。然而，这种方法在大数据量的情况下可能会消耗较多资源...
查看Redis内存信息的命令
09-08
这些指标有助于理解Redis在运行过程中的内存消耗趋势，以及是否存在内存泄漏等问题。 除了`info memory`，还有其他命令可以帮助获取更具体的内存信息： 1. `dbsize`: 通过`redis-cli dbsize`可以查看当前数据库中...
通过Key前缀分析Redis的内存占用按内存大小排序导出结果到csv文件
08-07
为了分析特定前缀的键所占用的内存，我们可以使用Redis的`INFO`命令来获取全局的内存信息，但无法直接获取到特定键的内存消耗。因此，我们通常需要编写脚本来遍历所有的键，并计算带有特定前缀的键的内存消耗。 在...
Redis缓存设计与性能优化精要
12-16
要避免**bigkey**，大的Key会导致内存碎片，影响Redis性能。选择合适的数据类型，如字符串、哈希、列表、集合和有序集合，根据实际需求来存储数据。同时，合理利用客户端连接池，可以有效管理和复用连接，减少网络...
单个Redis实例最多能存放多少个key？
ConstXiong
02-12 6545
官方给出，理论值是 2 的 32 次方个 实际使用中单个 Redis 实例最小储存 2.5 亿个 key 【Java面试题与答案】整理推荐 基础与语法 集合 网络编程 并发编程 Web 安全 设计模式 框架 算法与数据结构 异常 文件解析与生成 Linux MySQL Oracle Redis Dubbo ...
Redis性能瓶颈：如何优化大key问题？
微信公众号: 后端码匠
05-24 838
Redis大key问题是指在Redis中出现了一个或多个非常大的key，这些key的大小超过了Redis所能处理的最大值，从而导致Redis性能下降甚至宕机的现象。通常情况下，Redis的key大小应该尽量保持在较小的范围内，因为Redis是一个基于内存的数据结构存储系统，大key会占用大量内存资源，导致Redis的性能受到严重影响。多大的数据量才算是大key，具体取决于Redis服务器的内存大小、可用内存空间、系统负载等因素。
关于redis的key增加是否能影响查询效率
weixin_44348734的博客
08-02 675
如果你的Redis命令都是单个key比较多，O(1)操作，基本性能和key多少没有太大关系。
一个Redis实例最多能存放多少Keys
越努力越幸运。
01-10 1269
需要注意的是，尽管 Redis 允许存储数量庞大的键，但在实践中，存储过多的键可能会导致性能下降和内存消耗增加。因此，在设计应用程序时，需要根据实际需求和硬件资源来合理规划键的数量，避免过度使用 Redis 实例造成负担。如果需要存储更多的键值对，可以考虑使用 Redis 集群或分片技术，以扩展整体存储容量。这是由 Redis 内部使用的哈希表实现决定的，它使用 32 位有符号整数作为索引。Redis 使用的哈希函数和负载因子等因素也会影响实际可存放键的数量。
1000万个key的性能测试
勇气与行动
11-02 783
测试机器：16G内存  测试前： 代码： public static void main(String[] args) { Jedis jedis = new Jedis("localhost"); jedis.auth("123456"); System.out.println(jedis.ping()); Pipeline pipe...
首长，Redis性能优化十三条军规立好了，请过目~
好好学java
12-13 535
前言Redis作为高性能的内存数据库，在大数据量的情况下也会遇到性能瓶颈，日常开发中只有时刻谨记优化铁则，才能使得Redis性能发挥到极致。本文将会介绍十三条性能优化军规，开发过程中只要...
Redis 性能问题&优化方案
Fong灵
12-06 1689
Redis性能问题&优化方案
Redis详解：内存数据库的性能与优势
"Redis是一个高性能的Key-Value内存数据库，以其丰富的数据类型、高效的性能和持久化能力而闻名。与memcached相比，Redis提供了更多优势，包括支持字符串、列表、集合、有序集合和哈希等复杂数据结构。Redis的内存...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值