Redis学习——List的连锁更新如何解决？ListPack算法如何改变？

于 2024-09-10 16:02:32 发布
阅读量1.2k 收藏 12
点赞数 32
分类专栏： redis 秋招 文章标签： redis 学习 list
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Blackoutdragon/article/details/142093689
版权
秋招 同时被 2 个专栏收录
113 篇文章 4 订阅
订阅专栏
redis
2 篇文章 0 订阅
订阅专栏

文章目录

引言

  • 之前Redis匆匆学过之后，再回过头看，发现之前写的解决连锁更新的里有太过牵强了，有很多矛盾的地方，今天这里好好深挖一下，解决这个问题！

正文

List简介

  • List是redis中的一种数据结构，用来存储简单的字符串列表
    • 特点
      • 按照插入顺序排序
      • 可以从头部或者尾部向List列表添加元素

底层编码方式
在这里插入图片描述

  • 3.2之前，使用ZIPLIST和LINKEDLIST
    • ZIPLIST：元素个数小于512，并且每一个字节都小于64字节
    • LINKEDLIST：不满足上述条件使用LINKEDLIST
  • 3.2之后，使用QUICKLISK
    • 实际上是链表和ziplist的结合
      在这里插入图片描述
  • 今天所解决的连锁更新的问题，主要是围绕ZipList展开的，所以下面详细介绍一下ZipList的相关内容

ZipList

  • 类似链表紧凑型数据结构，能够节约内存，并且访问性能很好。

    • 链表是存在prev和next前后指针进行遍历访问，ZipList是通过记录前一个数据的长度实现前序遍历

  • 具体结构见下图

    • zlbytes
      • 表示ziplist一共占了多少个字节
    • zltail
      • 表示当前尾节点，相对于头节点偏移了多少字节
      • 通过tail快速定位到尾节点
    • zllen
      • 表示有多少数据节点，也就是有多少entry
    • zlend
      • 一个特殊的节点，表示zipllist的结束
        在这里插入图片描述

  • Entry结构，具体见下述示意图

    • prevlen
      • 上一个节点的数据长度
        • 作用
          • 通过当前节点的首地址P - 上一个节点的数据长度len，来获取上一个节点的起始位置，实现逆袭遍历，具体见下图
        • 类型
          • 前一个节点的长度，小于254字节，prevlen占据一个字节
          • 前一个节点的长度，大于255字节，prevlen占据四个字节，
    • encoding
      • 表示当前节点编码类型，主要由两个内容构成，分别是 当前节点的数据类型 + 当前节点的长度
    • entry-data
      • 表示当前节点的实际数据

在这里插入图片描述
prev说明

  • 0000 0000 ~ 1111 1110
    • 表示前一个节点的长度是0到254个字节，占据一个字节
  • 1111 1110 ，4 * （0000 0000）
    • 4 * （0000 0000）四个字节表示上一个节点的大小

什么是连锁更新

这里出现连锁更新，也是因为prev的字段的原因，存在如下情况，假设每一个节点大小都是253，然后第一个改了，后面都得改，具体见下图

  • 相当于第一次修改节点之后，需要所有节点都后移，然后再修改第二个节点的长度，后续所有节点有都需要向后移动，时间复杂度是n的平方
    在这里插入图片描述

ListPack解决连锁更新

  • 出现连锁更新的原因是因为prev是记录上一个节点长度，节点与节点之间是相互依赖的，现在为了解决节点之间的相互依赖性，让每一个节点仅仅记录自己的信息，所以采用ListPack算法，具体如下

在这里插入图片描述

  • 通过替换，每一个entry仅仅记录当前entry的长度，这样修改某一个entry，仅仅只需要修改当前entry的值，其他并不需要修改

在这里插入图片描述

总结

  • 之前就一直有疑惑，觉得并不能完全解决这个问题，因为将数据移动和连锁更新弄混了，对于这种紧凑结构而言，只要修改某一个数据，一定会发生数据移动的，但是连锁更新就不一定了！连锁更新是指更改一次数据，发生了多次完整的数据移动！
  • 继续加油吧！

信息来源

客院载论
关注
专栏目录
redis入门——MP3能上传吗？
NLP与推荐算法
03-30 2533
按照官方给的教程，结果我这里出错了？？？。 Hint: It's a good idea to run 'make test' ;) make[1]: Leaving directory '/home/./redis-5.0.8/src' 我就试试了test，似乎也没错啊 \o/ All tests passed without errors! Cleanup: may take ...
深入学习 Redis - 如何使用 Redis 作缓存？缓存更新策略？使用需要注意哪些问题（工作/重点）
CYK_byte的博客
09-19 4943
缓存可以理解为，将常用的数据从放到一个访问速度更快的的地方，方便更快的随时读取. 也就是说，速度快的设备，可以作为速度慢的设备的缓存，加快读取速度。
Redis中的压缩列表（连锁更新）
weixin_45729809的博客
03-28 1721
压缩列表的应用 压缩列表（ziplist）是列表键和哈希键的底层实现之一。当一个列表键只包含少量列表项，并且每个列表项要么就是小整数值，要么就是长度比较短的字符串，那么redis就会使用压缩列表来做列表键的底层实现。 redis> RPUSH lst 1 3 5 10086 "hello" "world" (integer)6 redis> OBJECT ENCODING lst "ziplist" 另外，当一个哈希键只包含少量键值对，并且每个键值对的键和值要么就是小整数值，要么就是长度较短
redis连锁更新
AmorHZR的博客
01-09 1071
💝💝💝欢迎来到我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。💝💝💝 ✨✨ 欢迎订阅本专栏 ✨✨。
listpack如何遍历？如何解决ziplist连锁更新问题？(五)
小派师兄
08-28 1690
listpack如何遍历？，如何解决ziplist连锁更新问题？(五)
原理Redis-ZipList
weixin_46926189的博客
11-21 599
1.压缩列表的可以看做一种连续内存空间的"双向链表"2.列表的节点之间不是通过指针连接，而是记录上一节点和本节点长度来寻址，内存占用较低3.如果列表数据过多，导致链表过长，可能影响查询性能4.增或删较大数据时有可能发生连续更新问题。
redis压缩列表ziplist的连锁扩容
不说话装高手
12-11 1428
redis中的压缩列表在插入数据的时候可能存在连锁扩容的情况。 在压缩列表中，节点需要存放上一个节点的长度，当上一个entry节点长度小于254个字节的时候，将会一个字节的大小来存放entry中的数据，但是当其长度大于等于254的时候，就会需要更大的空间来存放数据。在压缩列表中，会把大于等于254字节长度用5个字节来存储，第一个字节是254，当读到254的时候，将会确认接下来的4个字节大小将是e...
Redis——Redis如何保证数据一致性？
最新发布
qq_42631788的博客
06-30 3602
Redis 通过单线程操作、事务支持、持久化机制、复制和高可用、数据结构的原子性操作以及分布式锁等多种机制，保证了数据的一致性和可靠性。这些特性使得 Redis 成为一个广泛应用于高性能、高并发场景下的数据存储解决方案。
Redis报错NOAUTH Authentication required怎么解决？
十三月的博客
03-06 2786
在使用redis-cli时，可能会遇到报错。
Redis bigkeys命令会阻塞吗？怎么解决？
学Java，找哪吒
03-23 4624
Redis实战系列，打造精品专栏。
3.30--Redis之常用数据结构--listpack（总结篇）------加油呀
秉持长期主义，保持长期生命力和竞争力
03-30 741
listpack
Redis 的命令详解 - List 篇
编程爬阶小马的博客
11-16 274
LPUSH : 左端推入元素 起始版本 : 1.0.0 时间复杂度 : 添加一个元素为O(1)，添加多个元素为O(N)，N为要添加的元素个数。 将所有指定的值插入到存于 key 的列表的左端。如果 key 不存在，则在操作执行之前将其创建为空列表。如果key对应的value不是 list 类型时，则返回错误。 推入多个元素时，多个元素从左到右依次推入左端。例如，LPUSH mylist ...
Redis五大数据类型之 List 经常用到的命令
weixin_43484014的博客
05-28 451
Redis五大数据类型之 List 经常用到的命令 在redis里面，list可以是栈、队列、阻塞队列 所有的list执行的命令都是用L开头的 如LPUSH、LRANGE 1.list 增加值（LPUSH、RPUSH） localhost:2>LPUSH list left1 #插入list 从左侧插入（头部） "1" localhost:2>LPUSH list left2 "2" localhost:2>LPUSH list left3 "3" localhost:2>LRAN
Redis数据结构——QuickList、SkipList、RedisObjective
TiankkTT的博客
05-21 532
是一个节点为ZipList的双端链表。节点采用ZipList，解决了传统链表的内存占用问题。控制了ZipList大小，解决连续内存空间申请效率问题。中间节点可以压缩，进一步节省了内存。跳跃表是一个双向链表，每个节点都包含score和ele值。节点按照score值排序，score值一样则按照ele字典排序。每个节点都可以包含多层指针，层数是1到32之间的随机数。不同层指针到下一个节点的跨度不同，层级越高，跨度越大。增删改查效率与红黑树基本一致，实现却更简单。
Redis list 之增删改查
伏虎游侠的博客
05-07 473
Redis list 之增删改查 https://www.cnblogs.com/wanzaixiaoxin/p/4934117.html
从根上理解ziplist为什么要牺牲速度而进行压缩！
xmt1139057136的专栏
06-08 1573
你知道的越多，不知道的就越多，业余的像一棵小草！成功路上并不拥挤，因为坚持的人不多。编辑：业余草zhouwenxing.github.io推荐：https://www.xttblog.co...
Redis源码解析：07压缩列表
weixin_30510153的博客
02-21 124
压缩列表(ziplist)是列表键和哈希键的底层实现之一。当列表键只包含少量列表项，并且每个列表项要么是小整数值，要么是长度较短的字符串时；或者当哈希键只包含少量键值对，并且每个键值对的键和值要么是小整数值，要么是长度较短的字符串时，那么Redis就会使用压缩列表来做为列表键或哈希键的底层实现。 压缩列表是Redis为了节约内存而开发的，可用于存储字符串和整...
为什么Redis选择跳表来实现有序集合？——数据结构与算法之美
跳表是一种动态数据结构，可以支持快速的插入、删除和查找操作。它能够实现这些操作的原因是因为它建立了很多级索引，也就是我们在前面的课程中讲到的空间换时间的...希望通过本节的学习，你对跳表有了更深入的理解。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值