【萌味】小夕说,不了解动态空间增长的程序喵都是假喵(中)

亲爱的小屋客人,昨天小夕将小屋的讨论室重新装修啦!希望您会喜欢哦~除了口令[d],现在也可以通过主页下方的“喵了个咪”进入讨论室啦。

ps:昨天小夕装修讨论室的时候发生了N次差点吐血的事件,明天小夕与大家含泪分享T_T。

在上一篇文章中,小夕为大家讲解了链表与递增式扩容的姿势,而这一篇,将会是本系列文章的高潮哦(不!要!污!)

源于数组

上篇文章中,小夕为了避免大家理解起来抽象,让大家注意了几个数据结构:

如果您是C++程序喵,那么请注意一下Vector数据结构;如果是Java程序喵,请注意一下ArrayList、LinkedList、哈希系列(HashSet/ HashTable/ HashMap);如果是不用Java也不用C++的程序喵,或者是已经脱离XX编程语言层次的程序喵,那么请注意一下可变数组(可增长顺序表)、链表、哈希(散列)。

上篇文章中小夕讲解了基于链表实现的数据结构都是递增式扩容最优。那么对于C++中的Vector,Java中的ArrayList、HashSet/ HashTable/ HashMap,也就是数据结构中的可变数组、哈希来说,空间增长方式是怎样呢?可能有可爱的读者宝宝此时在想“天呐,这些数据结构又特喵的不一样,怎么放到一起讨论了呢?”好啦,让小夕碾压这些读者宝宝吧(小夕再次跑路)!其实这些表面看似不同的东西,底层的实现方式确是一样的,它们在底层都是通过操纵静态数组来实现他们的动态空间增长功能,下文会详细介绍哦。

讲到这里,可能爱思考的读者宝宝会记得小夕在上一篇中也提到过哈希,说哈希的横向增长是基于链表的,因此递增式扩容是最优动态空间增长方案。那这一篇中又说哈希是基于静态数组的,这是怎么回事呢?下面给没有接触过哈希的读者宝宝先科普一下哈希:

哈希的横向增长是基于链表实现的,即当新元素的哈希值与已有元素哈希值相同时,新元素会插入到某个链表中,因此是递增式增长。但是更多的情况下,哈希是纵向增长的。学过数据结构的宝宝知道,哈希在纵向上就是一个指针数组,数组的每个索引值即代表一个哈希值,数组的每个元素是一个指向某链表的指针。画个图来看就是这样的。

所以,在本篇文章中,我们不看哈希的横向增长啦,就看竖着的,也就是纵向增长,此时显然是基于静态数组实现的哦。

下面小夕直接以“数据结构”代称所有这些基于静态数组实现的动态空间分配的数据结构,包括但不限于C++中的Vector(即数据结构中的动态数组),Java中的ArrayList(即动态数组)、Hash系列(即哈希/散列)等~

具体来说,如何用静态数组实现上述的动态空间增长的数据结构呢?其实很简单,每次数据结构要扩容时只需要依次进行下述操作就完成啦:

  1. 开辟一段新的内存空间,空间大小就是扩容后的数据结构大小。

  2. 把旧数据结构,也就是旧的内存空间的元素一个个的复制到新的内存空间

  3. 释放旧的内存空间(代码上就是删除旧空间的指针,当然像Java这种自动管理内存的语言就不用程序喵操心这一步了)

通过上述扩容的三步操作,可以看到每次哈希表的扩容操作的代价还是挺大的。第1步和第3步的代价不算大,但是第2步的代价会随着要搬移元素数量的增加而直线上升。所以这就相当于一个完整搬家的过程:先买个新房子,再把旧房子里的全部家当搬到新房子里去,再把旧房子注销,你说麻不麻烦喵= ̄ω ̄=

加倍式扩容

既然代价如此之大,那么显然我们要尽量减小扩容次数呀~每次扩容都是大出血...怎么扩呢?一个很creative的想法就是每次使数据结构变为自身的两倍!再机智一点,每次使数据结构变为自身的N倍!其中N只要大于1就可以!这种每次使自身的大小变为之前N倍的数据结构动态空间增长方式称为【加倍式扩容】。实际上,基于静态数组的数据结构的动态空间增长问题上加倍式扩容远远优于递增式扩容口说无凭,待小夕用萌味算法分析来证明!

假如数据结构A使用【递增式扩容】。每次数据结构满了的时候就固定的增加10个单位的空间(增加单位的数量不会影响最终分析出来的复杂度哦)。好,那小夕现在手里有n个元素想添加进数据结构,假如n的数值很大,远远的大于10,那么要执行多少次扩容操作呢?当然是n/10次啦~这n/10次扩容的累计开销大约为cost=10+2*10+3*10+…+(n/10)*10,计算一下这个级数,就是cost=[(n/10)/2]*[(n/10)+1]*10,所以复杂度是O(n2)的数量级,所以平均每个元素被添加进哈希表时的开销为cost/n,也就是O(n)的复杂度。

 

假如数据结构B使用【加倍式扩容】。每次数据结构满了的时候,数据结构的大小就变成原来的2倍(与之前同样的,这个倍数取不同的值并不会影响最终分析出来的复杂度哦~当然倍数必须大于1!)。同样,小夕将n个元素添加进数据结构,假如n的数值很大,远远的大于2,那么要执行的扩容操作的次数是…小夕去算一会...嗯…应该是log2n!令c=log2n,则这c次扩容操作的累计开销为cost=21+22+…+2c。这个级数的和为cost=[2/(1-2)]*(1-2c),代入c=log2n得cost=2(n-1)。也就是说复杂度为O(n),所以平均每个元素被添加进哈希表时的开销为cost/n,也就是O(1)的复杂度!注意前面我们计算过,这里数据结构A(递增式扩容)的复杂度为O(n)!

怎么样~小夕说的没错吧,读者宝宝有没有拨开云彩见到日呢( ̄∇ ̄)。所以说呀,正是因为这类数据结构采用了加倍式扩容,导致这类数据结构申请内存的时候翻倍翻倍的要。结果当时在那个机器学习任务中,小夕算的是一个超大哈希表只需要占用5个G作右的内存空间,而实际上在往这个哈希表加数据时,从4个G直接爆到了接近8个G,导致小夕内存8G的小电脑直接崩盘了~

等等,看似此文可以结了,实际上,敏锐的读者宝宝可能想到了,“递增式扩容你都告诉我了每次扩容增加一个单位的空间就最优了,那加倍式扩容每次增大几倍最优呢?”如果读者宝宝能发现这一点的话,真的非常棒啦!答案是2倍吗?当然不!那是几呢?下篇萌货(萌味干货的简称)见分晓( ̄∇ ̄)。

啊啊,高潮果然是最累的(我说文章的高潮啊喂~),小夕好累喵(´Д` )。所以亲爱的读者宝宝是不是有一种抑制不住要鼓励小夕的冲动吖(⁎⁍̴̛ᴗ⁍̴̛⁎)

小夕已委托维权骑士对小夕发布文章的版权行为进行追究与维权。如需转载,请联系微信xiyaomengmengda。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值