hash表详解与红黑树(RB-Tree)

本文详细介绍了哈希表在处理大数据时的作用,特别是如何利用哈希表解决百度TopK面试题。通过建立哈希表统计查询串频率,再用堆排序找出最热门的10个查询串。此外,还提到了哈希函数的选择,推荐使用斐波那契散列法。最后,简要提及了红黑树的相关资源链接。
摘要由CSDN通过智能技术生成

hash表(散列表)一般被用来加密,压缩等。
当选择的hash函数足够复杂时(难以破解),那么密码的明码通过此hash函数生成散列值的过程就是不可逆的,这往往被IT公司用来保存用户的密码,防止泄露。
hash table被用来压缩,主要是因为通过hash函数映射后,数据存储的空间大大缩小,提高空间利用率,往往被用来处理大数据,这是由于通过hash函数映射的散列值所占用的空间远远小于原数据。
以百度TopK面试题为例进行说明:
问题描述
搜索引擎会通过日志文件把用户每次检索使用的所有检索串都记录下来,每个查询串的长度为1-255字节。
假设目前有一千万个记录(这些查询串的重复度比较高,虽然总数是1千万,但如果除去重复后,不超过3百万个。一个查询串的重复度越高,说明查询它的用户越多,也就是越热门。),请你统计最热门的10个查询串,要求使用的内存不能超过1G。
分析:
第一步:统计各个查询串出现的次数
1.首先直接将数据存入内存中是不合适的,因为根据题意此一千万条数据占用的内存大于1G,所以不能选择内部排序。考虑外排后,再遍历所有数据统计频数。
2.外排时,文件排序用归并排序是最合适的,时间复杂度为O(nlogn)。而用hash table的时间复杂度为O(n)。
用法如下:
1.以查询串为Key值,以出现的次数为value创建哈希表,key值通过哈希函数映射为数字,数字对数组长度取余,余数就为hash表的下表,将对应的数据进行存储。hash表的实现方式有多种&#x

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值