完美哈希函数(Perfect Hash Function)

原创 2007年08月05日 18:09:00
  
什么是完美哈希函数
 
完美哈希函数(Perfect Hash Function,简称PHF就是没有冲突的哈希函数,也就是,函数 H 将 N 个 KEY 值映射到 M 个整数上,这里 M>=N ,而且,对于任意的 KEY1 ,KEY2 ,H( KEY1 ) != H( KEY2 ) ,并且,如果 M = = N ,则 H 是最小完美哈希函数(Minimal Perfect Hash Function,简称MPHF
 
什么时候使用PHFMPHF
 
通常情况下,PHF或MPHF是针对静态集合的。也就是,在使用PHF或MPHF时,所有的 KEY 值是事先已知并且固定的。不过,这里有针对动态集合的一个算法(我没有仔细看,不敢肯定)。
 
使用PHFMPHF的一般流程
 
1.         (准备阶段)将已知的所有的 KEY 值传给PHF或MPHF生成算法,生成PHF或MPHF以及相应的数据;
2.         (使用阶段)调用已有的PHF或MPHF以及相应的数据快速计算哈希值并进行相应的操作。
其实在实际使用中我们只关心步骤2,但步骤1的生成算法却是PHF或MPHF的关键。
 
PHFMPHF生成程序库
 
gperf
GNU的完美哈希函数生成程序,可以生成PHF和MPHF,生成MPHF时和输入数据以及参数设置的关系比较大。使用的应该是比较简单的算法,生成的效率不高,当数据量大时,程序就没什么反应了。生成的结果是代码(里面包含有数据,直接组织在代码里),移植性非常好。很多编译器对保留字的处理都采用gperf来建立完美哈希函数。Windows版的可执行文件可以从这里下载,源代码可以从这里下载,一篇介绍论文在这里,说明书在这里,说明书中文翻译在这里
易用性:                            5
稳定性:                            5
移植性:                            5
效率(针对大数据量):     2
MPHF:                             2
 
CMPH
巴西的这个哥们Fabiano C. Botelho发了很多MPHF方面的论文。CMPH应该他和其他几个人开发的开源的生成MPHF的程序库。这里面封装了4个算法,而且设计了一个程序框架(搞不懂他们为什么要设计这样一个框架,用MPHF的人不会像他们做研究那样会一次使用那么多个算法的,而这样一个框架明显增加了使用的难度)。里面有几个算法是针对大数据量的,但简单试了试,发现并不像他们论文里宣称的那样高效,而且由于是一个框架,生成的MPHF并不能直接脱离他们的环境来使用。这里是他们在SourceForge上的链接。
易用性:                            3
稳定性:                            2
移植性:                            2
效率(针对大数据量):     2
MPHF:                             5
 
mph
又一个牛人写的生成MPHF的算法,注意了,他写这个纯粹是为了好玩,考!
简单试了试,可以直接生成代码,但不是很好用,针对大数据量效率也不行。
易用性:                            3
稳定性:                            3
移植性:                            4
效率(针对大数据量):     3
MPHF:                             5
 
无名
又又一个牛人写的生成MPHF的算法,比较好用,可以处理大数据量的集合,而且比较有特色的是关键字不仅仅可以是字符串,还可以是整数等。
易用性:                            5
稳定性:                            5
移植性:                            4
效率(针对大数据量):     5
MPHF:                             5
 
perfect_hash.py
以上都是用C/C++来实现的PHFMPHF生成程序考,这是一个用Python实现的MPHF生成程序。还是比较好用的,遗憾的是对大数据量效率不行。
易用性:                            5
稳定性:                            5
移植性:                            4
效率(针对大数据量):     3
MPHF:                             5
 
PHFMPHF生成算法
我一贯坚持的是拿来主义(只要不存在法律和道德风险),所以对PHFMPHF的生成算法我只是浅尝辄止,不敢在这里唧唧歪歪。下面给出一些链接,想研究这些算法好好看这些论文吧。论文按大概时间顺序排列,最新的在最前面。
A Practical Minimal Perfect Hashing Method
An Approach for Minimal Perfect Hash Functions for Very Large Databases
A New algorithm for constructing minimal perfect hash functions
A optimal algorithm to generating minimal perfect hash functions
 

相关文章推荐

散列函数(哈希函数,Hash Function)

说明          散列的概念属于查找,它不以关键字的比较为基本操作,采用直接寻址技术。在理想情况下,查找的期望时间为O(1)。 简单的说,hash函数就是把任意长的输入字符串变化成固定长的输...
  • ywok526
  • ywok526
  • 2014年08月13日 18:41
  • 7613

经典字符串hash函数介绍及性能比较

转载自:http://blog.csdn.net/djinglan/article/details/8812934 各种字符串Hash函数 http://www.cnblogs.com/atlant...

LintCode HashFunction 哈希函数

在数据结构中,哈希函数是用来将一个字符串(或任何其他类型)转化为小于哈希表大小且大于等于零的整数。一个好的哈希函数可以尽可能少地产生冲突。一种广泛使用的哈希函数算法是使用数值33,假设任何字符串都是基...

uva 188 Perfect Hash(进制转换 + 遍历)

Perfect Hash  Perfect Software, Inc. has obtained a government contract to examine text f...

Perfect Hashing VS. Bloom Filter

Perfect Hashing VS. Bloom Filter在Network Applications of Bloom Filters: A Survey一文中,作者提到了一种基于Perfect...

对《算法导论》完全散列(perfect hashing)的分析

完全散列将关键字通过一级散列函数h1和二级散列函数h2后映射到二级散列中,其中,关键字个数等于桶数(n=m),二级散列的大小N(T[i])为关键字个数的平方,用以保证完全O(n)的存储空间,以及O(1...

最小完美哈希函数简介

http://www.yankay.com/introduction-to-opmphf/ 什么是保序最小完美哈希函数 我曾经花了很多脑筋来找一个很好很完美的哈希算法,但都没有想到...

系统学习hash算法(哈希算法)

本篇文章仅仅是关于hash一个开始。在学习了

散列表之完美散列

散列表之完美散列 完美散列perfect hashing 两级散列法 gperf工具来自动生成完美散列函数 gperf的安装 gperf关键字文件的书写格式 gperf应用举例 注意本文中的所有代码你...

Delphi7高级应用开发随书源码

  • 2003年04月30日 00:00
  • 676KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:完美哈希函数(Perfect Hash Function)
举报原因:
原因补充:

(最多只允许输入30个字)