各种字符串Hash函数比较及各种Hash算法代码大全

最新推荐文章于 2024-03-05 23:31:23 发布
最新推荐文章于 2024-03-05 23:31:23 发布
阅读量1.4w 收藏 20
点赞数 4
分类专栏： 业务与算法 文章标签： HashCode 哈希函数 哈希算法 Hash函数 Hash算法

       常用的字符串Hash函数还有ELFHash，APHash等等，都是十分简单有效的方法。这些函数使用位运算使得每一个字符都对最后的函数值产生影响。另外还有以MD5和SHA1为代表的杂凑函数，这些函数几乎不可能找到碰撞。

       常用字符串哈希函数有BKDRHash，APHash，DJBHash，JSHash，RSHash，SDBMHash，PJWHash，ELFHash等等。对于以上几种哈希函数，我对其进行了一个小小的评测。

Hash函数数据1数据2数据3数据4数据1得分数据2得分数据3得分数据4得分平均分
BKDRHash20477448196.5510090.9582.0592.64
APHash23475449396.5588.4610051.2886.28
DJBHash22497547496.5592.31010083.43
JSHash14476150610084.6296.8317.9581.94
RSHash10486150510010051.5820.5175.96
SDBMHash32484950493.192.3157.0123.0872.41
PJWHash302648785130043.89021.95
ELFHash302648785130043.89021.95

       其中数据1为100000个字母和数字组成的随机串哈希冲突个数。数据2为100000个有意义的英文句子哈希冲突个数。数据3为数据1的哈希值与1000003(大素数)求模后存储到线性表中冲突的个数。数据4为数据1的哈希值与10000019(更大素数)求模后存储到线性表中冲突的个数。

        经过比较，得出以上平均得分。平均数为平方平均数。可以发现，BKDRHash无论是在实际效果还是编码实现中，效果都是最突出的。APHash也是较为优秀的算法。DJBHash,JSHash,RSHash与SDBMHash各有千秋。PJWHash与ELFHash效果最差，但得分相似，其算法本质是相似的。

附1：各种哈希函数的C程序代码

#define M  249997 
#define M1 1000001 
#define M2 0xF0000000 

// RS Hash Function  
unsigned int RSHash(char*str) 
{ 
    unsigned int b=378551 ; 
    unsigned int a=63689 ; 
    unsigned int hash=0 ;     
    while(*str) 
    { 
        hash=hash*a+(*str++); 
        a*=b ; 
    }     
    return(hash % M); 
} 
 
// JS Hash Function  
unsigned int JSHash(char*str) 
{ 
    unsigned int hash=1315423911 ;    
    while(*str) 
    { 
        hash^=((hash<<5)+(*str++)+(hash>>2)); 
    }      
    return(hash % M); 
} 
 
// P. J. Weinberger Hash Function  
unsigned int PJWHash(char*str) 
{ 
    unsigned int BitsInUnignedInt=(unsigned int)(sizeof(unsigned int)*8); 
    unsigned int ThreeQuarters=(unsigned int)((BitsInUnignedInt*3)/4); 
    unsigned int OneEighth=(unsigned int)(BitsInUnignedInt/8); 
    unsigned int HighBits=(unsigned int)(0xFFFFFFFF)<<(BitsInUnignedInt-OneEighth); 
    unsigned int hash=0 ; 
    unsigned int test=0 ;     
    while(*str) 
    { 
        hash=(hash<<OneEighth)+(*str++); 
        if((test=hash&HighBits)!=0) 
        { 
            hash=((hash^(test>>ThreeQuarters))&(~HighBits)); 
        } 
    }      
    return(hash % M); 
} 
 
// ELF Hash Function  
unsigned int ELFHash(char*str) 
{ 
    unsigned int hash=0 ; 
    unsigned int x=0 ;    
    while(*str) 
    { 
        hash=(hash<<4)+(*str++); 
        if((x=hash&0xF0000000L)!=0) 
        { 
            hash^=(x>>24); 
            hash&=~x ; 
        } 
    }     
    return(hash % M); 
} 
 
// BKDR Hash Function  
unsigned int BKDRHash(char*str) 
{ 
    unsigned int seed=131 ;// 31 131 1313 13131 131313 etc..  
    unsigned int hash=0 ;     
    while(*str) 
    { 
        hash=hash*seed+(*str++); 
    }     
    return(hash % M); 
} 
 
// SDBM Hash Function  
unsigned int SDBMHash(char*str) 
{ 
    unsigned int hash=0 ;     
    while(*str) 
    { 
        hash=(*str++)+(hash<<6)+(hash<<16)-hash ; 
    }     
    return(hash % M); 
} 
 
// DJB Hash Function  
unsigned int DJBHash(char*str) 
{ 
    unsigned int hash=5381 ;    
    while(*str) 
    { 
        hash+=(hash<<5)+(*str++); 
    }      
    return(hash % M); 
} 
 
// AP Hash Function  
unsigned int APHash(char*str) 
{ 
    unsigned int hash=0 ; 
    int i ;      
    for(i=0;*str;i++) 
    { 
        if((i&1)==0) 
        { 
            hash^=((hash<<7)^(*str++)^(hash>>3)); 
        } 
        else  
        { 
            hash^=(~((hash<<11)^(*str++)^(hash>>5))); 
        } 
    }      
    return(hash % M); 
}

附2：Hash算法大全

/**   
* Hash算法大全<br>   
* 推荐使用FNV1算法   
* @algorithm None   
* @author Goodzzp 2006-11-20   
* @lastEdit Goodzzp 2006-11-20    
* @editDetail Create   
*/
public class HashAlgorithms
{
    /**   
    * 加法hash   
    * @param key 字符串   
    * @param prime 一个质数   
    * @return hash结果   
    */
    public static int additiveHash(String key, int prime)
    {
        int hash, i;
        for (hash = key.length(), i = 0; i < key.length(); i++)
            hash += key.charAt(i);
        return (hash % prime);
    }

    /**   
    * 旋转hash   
    * @param key 输入字符串   
    * @param prime 质数   
    * @return hash值   
    */
    public static int rotatingHash(String key, int prime)
    {
        int hash, i;
        for (hash = key.length(), i = 0; i < key.length(); ++i)
            hash = (hash << 4) ^ (hash >> 28) ^ key.charAt(i);
        return (hash % prime);
        //   return (hash ^ (hash>>10) ^ (hash>>20));    
    }
    // 替代：    
    // 使用：hash = (hash ^ (hash>>10) ^ (hash>>20)) & mask;    
    // 替代：hash %= prime;    

    /**   
    * MASK值，随便找一个值，最好是质数   
    */
    static int M_MASK = 0x8765fed1;
    /**   
    * 一次一个hash   
    * @param key 输入字符串   
    * @return 输出hash值   
    */
    public static int oneByOneHash(String key)
    {
        int hash, i;
        for (hash = 0, i = 0; i < key.length(); ++i)
        {
            hash += key.charAt(i);
            hash += (hash << 10);
            hash ^= (hash >> 6);
        }
        hash += (hash << 3);
        hash ^= (hash >> 11);
        hash += (hash << 15);
        //   return (hash & M_MASK);    
        return hash;
    }

    /**   
    * Bernstein's hash   
    * @param key 输入字节数组   
    * @param level 初始hash常量   
    * @return 结果hash   
    */
    public static int bernstein(String key)
    {
        int hash = 0;
        int i;
        for (i = 0; i < key.length(); ++i) hash = 33 * hash + key.charAt(i);
        return hash;
    }

    //    
     Pearson's Hash    
    // char pearson(char[]key, ub4 len, char tab[256])    
    // {    
    //   char hash;    
    //   ub4 i;    
    //   for (hash=len, i=0; i<len; ++i)     
    //     hash=tab[hash^key[i]];    
    //   return (hash);    
    // }    

     CRC Hashing，计算crc,具体代码见其他    
    // ub4 crc(char *key, ub4 len, ub4 mask, ub4 tab[256])    
    // {    
    //   ub4 hash, i;    
    //   for (hash=len, i=0; i<len; ++i)    
    //     hash = (hash >> 8) ^ tab[(hash & 0xff) ^ key[i]];    
    //   return (hash & mask);    
    // }    

    /**   
    * Universal Hashing   
    */
    public static int universal(char[] key, int mask, int[] tab)
    {
        int hash = key.length, i, len = key.length;
        for (i = 0; i < (len << 3); i += 8)
        {
            char k = key[i >> 3];
            if ((k & 0x01) == 0) hash ^= tab[i + 0];
            if ((k & 0x02) == 0) hash ^= tab[i + 1];
            if ((k & 0x04) == 0) hash ^= tab[i + 2];
            if ((k & 0x08) == 0) hash ^= tab[i + 3];
            if ((k & 0x10) == 0) hash ^= tab[i + 4];
            if ((k & 0x20) == 0) hash ^= tab[i + 5];
            if ((k & 0x40) == 0) hash ^= tab[i + 6];
            if ((k & 0x80) == 0) hash ^= tab[i + 7];
        }
        return (hash & mask);
    }

    /**   
    * Zobrist Hashing   
    */
    public static int zobrist(char[] key, int mask, int[][] tab)
    {
        int hash, i;
        for (hash = key.length, i = 0; i < key.length; ++i)
            hash ^= tab[i][key[i]];
        return (hash & mask);
    }

    // LOOKUP3     
    // 见Bob Jenkins(3).c文件    

    // 32位FNV算法    
    static int M_SHIFT = 0;
    /**   
    * 32位的FNV算法   
    * @param data 数组   
    * @return int值   
    */
    public static int FNVHash(byte[] data)    
    {    
        int hash = (int)2166136261L;    
        for(byte b : data)    
            hash = (hash * 16777619) ^ b;    
        if (M_SHIFT == 0)    
            return hash;    
        return (hash ^ (hash >> M_SHIFT)) & M_MASK;    
    }

    /**   
     * 改进的32位FNV算法1   
     * @param data 数组   
     * @return int值   
     */
    public static int FNVHash1(byte[] data)    
    {    
        final int p = 16777619;    
        int hash = (int)2166136261L;    
        for(byte b:data)    
            hash = (hash ^ b) * p;    
        hash += hash << 13;    
        hash ^= hash >> 7;    
        hash += hash << 3;    
        hash ^= hash >> 17;    
        hash += hash << 5;    
        return hash;    
    }

    /**   
     * 改进的32位FNV算法1   
     * @param data 字符串   
     * @return int值   
     */
    public static int FNVHash1(String data)    
    {    
        final int p = 16777619;    
        int hash = (int)2166136261L;    
        for(int i=0;i<data.length();i++)    
            hash = (hash ^ data.charAt(i)) * p;    
        hash += hash << 13;    
        hash ^= hash >> 7;    
        hash += hash << 3;    
        hash ^= hash >> 17;    
        hash += hash << 5;    
        return hash;    
    }

    /**   
     * Thomas Wang的算法，整数hash   
     */
    public static int intHash(int key)    
    { 
        key += ~(key << 15);    
        key ^= (key >>> 10);    
        key += (key << 3);    
        key ^= (key >>> 6);    
        key += ~(key << 11);    
        key ^= (key >>> 16);    
        return key;    
    }

    /**   
     * RS算法hash   
     * @param str 字符串   
     */
    public static int RSHash(String str)
    {
        int b = 378551;
        int a = 63689;
        int hash = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash = hash * a + str.charAt(i);
            a = a * b;
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of RS Hash Function */

    /**   
     * JS算法   
     */
    public static int JSHash(String str)
    {
        int hash = 1315423911;
        for (int i = 0; i < str.length(); i++)
        {
            hash ^= ((hash << 5) + str.charAt(i) + (hash >> 2));
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of JS Hash Function */

    /**   
     * PJW算法   
     */
    public static int PJWHash(String str)
    {
        int BitsInUnsignedInt = 32;
        int ThreeQuarters = (BitsInUnsignedInt * 3) / 4;
        int OneEighth = BitsInUnsignedInt / 8;
        int HighBits = 0xFFFFFFFF << (BitsInUnsignedInt - OneEighth);
        int hash = 0;
        int test = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash = (hash << OneEighth) + str.charAt(i);

            if ((test = hash & HighBits) != 0)
            {
                hash = ((hash ^ (test >> ThreeQuarters)) & (~HighBits));
            }
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of P. J. Weinberger Hash Function */

    /**   
     * ELF算法   
     */
    public static int ELFHash(String str)
    {
        int hash = 0;
        int x = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash = (hash << 4) + str.charAt(i);
            if ((x = (int)(hash & 0xF0000000L)) != 0)
            {
                hash ^= (x >> 24);
                hash &= ~x;
            }
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of ELF Hash Function */

    /**   
     * BKDR算法   
     */
    public static int BKDRHash(String str)
    {
        int seed = 131; // 31 131 1313 13131 131313 etc..    
        int hash = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash = (hash * seed) + str.charAt(i);
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of BKDR Hash Function */

    /**   
     * SDBM算法   
     */
    public static int SDBMHash(String str)
    {
        int hash = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash = str.charAt(i) + (hash << 6) + (hash << 16) - hash;
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of SDBM Hash Function */

    /**   
     * DJB算法   
     */
    public static int DJBHash(String str)
    {
        int hash = 5381;
        for (int i = 0; i < str.length(); i++)
        {
            hash = ((hash << 5) + hash) + str.charAt(i);
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of DJB Hash Function */

    /**   
     * DEK算法   
     */
    public static int DEKHash(String str)
    {
        int hash = str.length();
        for (int i = 0; i < str.length(); i++)
        {
            hash = ((hash << 5) ^ (hash >> 27)) ^ str.charAt(i);
        }
        return (hash & 0x7FFFFFFF);
    }
    /* End Of DEK Hash Function */

    /**   
     * AP算法   
     */
    public static int APHash(String str)
    {
        int hash = 0;
        for (int i = 0; i < str.length(); i++)
        {
            hash ^= ((i & 1) == 0) ? ((hash << 7) ^ str.charAt(i) ^ (hash >> 3)) :
                                     (~((hash << 11) ^ str.charAt(i) ^ (hash >> 5)));
        }
        //       return (hash & 0x7FFFFFFF);    
        return hash;
    }
    /* End Of AP Hash Function */

    /**   
     * JAVA自己带的算法   
     */
    public static int java(String str)
    {
        int h = 0;
        int off = 0;
        int len = str.length();
        for (int i = 0; i < len; i++)
        {
            h = 31 * h + str.charAt(off++);
        }
        return h;
    }

    /**   
     * 混合hash算法，输出64位的值   
     */
    public static long mixHash(String str)
    {
        long hash = str.hashCode();
        hash <<= 32;
        hash |= FNVHash1(str);
        return hash;
    }
}


 

三五月儿
关注
专栏目录
字符串Hash函数
知行且执行
07-19 781
Hash函数：Hash，一般翻译做"散列"，也有直接音译为"哈希"的，就是把任意长度的输入（又叫做预映射， pre-image），通过散列算法，变换成固定长度的输出，该输出就是散列值。这种转换是一种压缩映射，也就是，散列值的空间通常远小于输入的空间，不同的输入可能会散列成相同的输出，而不可能从散列值来唯一的确定输入值。简单的说就是一种将任意长度的消息压缩到某一固定长度的消息摘要的函数。完美的h
字符串Hash函数（ELFhash）
weixin_33910385的博客
01-14 394
     百度，google了很多关于这个函数的用法。都大同小异，都只是给出了代码，我觉得对我这个初学者来说有点难理解。所以，在这，我综合一下我搜到的知识，把它再加深下印象吧。     ELFhash函数关键是要取得字符串对应的hash值。(别人的分析：它对于长字符串和短字符串都很有效，字符串中每个字符都有同样的作用，它巧妙地对字符的ASCII编码值进行计算，ELFhash函数对于能够比较均匀地...
字符串hash函数
放飞梦想
04-07 777
字符串hash函数，解决冲突用开放定址法，每次对哈希值加1在下列程序中，不是按常规方法用哈希表来记录关键字，而是用整型数组Htable记录关键字在字符串ch中的位置。在插入时不用把关键字复制到哈希表中，只是记录一个索引，从而提高了效率。当查询时，只要把Htable的值映射到字符串ch中就可以了。注意ch的下标要从1开始，因为Htable中的零值认为是空，处理起来比较方便。#includei
字符串哈希函数
hacker00011000的专栏
08-08 1428
链表查找的时间效率为O(N)，二分法为log2N，B+ Tree为log2N，但Hash链表查找的时间效率为O(1)。 设计高效算法往往需要使用Hash链表，常数级的查找速度是任何别的算法无法比拟的，Hash链表的构造和冲突的不同实现方法对效率当然有一定的影响，然而Hash函数是Hash链表最核心的部分，本文尝试分析一些经典软件中使用到的字符串Hash函数在执行效率、离散性、空间利用率等方面的性
各种字符串Hash函数比较1
08-08
标题提到的"各种字符串Hash函数比较1"是一个关于评估不同字符串哈希函数性能的文章。描述中提到了一些常见的哈希函数，如BKDRHash、APHash、DJBHash、JSHash、RSHash、SDBMHash、PJWHash和ELFHash，并且给出了这些...
字符串hash算法比较
09-20
字符串哈希算法是一种将任意长度的字符串映射到固定长度哈希值的算法，通常用于快速查找、数据索引和内存管理等。在计算机科学中，哈希函数的设计至关重要，因为它直接影响到哈希表的性能。本文将探讨几种经典的字符...
字符串Hash
01-20
字符串Hash函数把一个任意长度的字符串映射成一个非负整数，并且其冲突概率几乎为 000。 取一固定值 PPP，把字符串看作 PPP 进制数，并分配一个大于 000 的数值，代表每种字符。一般来说，我们分配的数值都远小于P。...
javascript实现获取字符串hash值
12-11
性能很高的计算字符串或文件hash值的函数，比md5速度快得多，自己一直用着，重复的几率为很底，一般的应用足够， var I64BIT_TABLE = 'ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789_-'.split...
各种字符串Hash函数
涛涛不解
04-02 999
转自：http://blog.csai.cn/user3/50125/archives/2009/35638.html http://www.cnblogs.com/xinzaibing/archive/2010/03/15/1686452.html   常用的字符串Hash函数还有ELFHash，APHash等等，都是十分简单有效的方法。这些函数使用位运算使得每一个字符都对最后的函数值产生
字符串hash以及7大问题
04-09
字符串hash以及7大问题，有兴趣的同学可以看一下。。。。
各种字符串Hash函数比较
孤独小剑的专栏
09-15 5385
常用的字符串Hash函数还有ELFHash，APHash等等，都是十分简单有效的方法。这些函数使用位运算使得每一个字符都对最后的函数值产生影响。另外还有以MD5和SHA1为代表的杂凑函数，这些函数几乎不可能找到碰撞。 常用字符串哈希函数有BKDRHash，APHash，DJBHash，JSHash，RSHash，SDBMHash，PJWHash，ELFHash等等。对于以上几种哈希函数，我对其进
字符串哈希（HASH）
最新发布
cgl18973281319的博客
03-05 2179
一个字符串的哈希值。
mysql 字符串的hash函数_经典字符串Hash函数介绍
weixin_42165018的博客
02-07 1242
作者阅读过大量经典软件原代码，下面分别介绍几个经典软件中出现的字符串Hash函数。2.1 PHP中出现的字符串Hash函数static unsigned long hashpjw(char *arKey, unsigned intnKeyLength){unsigned long h = 0, g;char *arEnd=arKey+nKeyLength;while (arKey < arE...
常用的字符串哈希函数
dvlinker的技术专栏
01-23 1万+
本文将介绍什么是字符串哈希函数，字符串哈希函数常见用法，以及字符串哈希函数的实现原理和常用算法。
经常使用哈希函数的比較及其C语言实现
weixin_33711647的博客
04-16 226
基本概念 所谓完美哈希函数。就是指没有冲突的哈希函数。即对随意的 key1 != key2 有h(key1) != h(key2)。 设定义域为X，值域为Y, n=|X|,m=|Y|。那么肯定有m&gt;=n,假设对于不同的key1,key2属于X,有h(key1)!=h(key2)，那么称h为完美哈希函数，当m=n时，h称为最小完美哈希函数（这个时候就是一一映射了）。 在处理大...
【算法学习】字符串哈希（Hash）
热门推荐
Mikchy的博客
01-15 3万+
什么是字符串Hash 构造字符串Hash 1）自然溢出方法 2）单Hash方法 3）双Hash方法 4）三种不同的构造方法的对比 获取子串的Hash O(1) 1）例子 2）公式 具体的题目例子 1）题目链接 2）题意 3）解题分析 4）AC代码（自然溢出 C++） 5）AC代码（单Hash C++） 6）AC代码（双Hash C++） 什么是字符串Hash ...
字符串Hash函数对比
9hguslo
07-06 114
　　今天根据自己的理解重新整理了一下几个字符串hash函数，使用了模板，使其支持宽字符串，代码如下： 　　/// @brief BKDR Hash Function /// @detail 本算法由于在Brian Kernighan与Dennis Ritchie的《The C Programming Language》一书被展示而得名，是一种简单快捷的hash算法。 template size...
FNV与FNV-1a Hash算法说明
Walter的专栏
09-27 5790
The core of the FNV hash The core of the FNV-1 hash algorithm is as follows: hash = offset_basis for each octet_of_data to be hashed hash = hash * FNV_prime hash = hash xor octet_of_data r
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值