给40亿个不重复的无符号整数,没排过序,给你一个无符号整数,如何快速判断这个数是否在这40亿个数中?
首先看到这个题第一个想到的就是遍历一遍,看这个数在不在。但是这样的时间复杂度太高了O(N),数据量太大,因此该方法不行。
其次我们想到排序,利用二分查找,时间复杂度是O(logN),但是排序本身就有很大的消耗,并且40亿个数据内存一次也存不下。
那么就采用位图!位图就是用来判断一个数据在不在的最好方法了!
分析
- 位图是一种直接定址法的哈希,因此效率很高,用O(1)就可以探测到对应位是0还是1,效率非常高,因此可以快速判断。
- 40亿个数据,我们可以大概计算一下,一个数据4字节,那么40亿数据就是160亿字节。我们都知道4G大概是42亿九千万字节,那么1G大概也就是10亿字节,所以160亿字节大约就是16G,因此要把40亿个数据存放到内存中需要16G的内存空间。数据量还是非常大的,如果我们采用位图的话,一个数据就占一个比特位,42亿九千万个字节需要512M就可以存下,因此用位图存的话也节省了空间。【但是这里我们开空间的话需要注意要开42亿九千万字节,有人可能会有疑问?为什么不是40亿,题目不就是40亿个数据吗?但是我们要注意,位图开的是一个范围,因为难免这40亿个数据中会有大于40亿的数据出现,万一出现一个大小为41亿的数据呢,那我们把这个数据映射到哪里呢,所以开的范围是就是42亿九千万字节,一个位置对应一个数】
- 使用位图,先将这些数遍历一般进行set(把每个出现的数据的对应位图的位置为1),然后要查找某个数在不在时,直接test这个数即可,返回真就是存在,返回假就是不存在。
具体代码的实现可以戳博主的上一篇文章~数据结构:位图