冒险解谜游戏中文网 ChinaAVG

标题: 各种字符串Hash函数比较 [打印本页]

作者: shane007    时间: 2010-5-20 11:30
标题: 各种字符串Hash函数比较
原文
. ~3 B# D) t! O  {  I! }5 z( [2 dhttp://blog.csai.cn/user3/50125/archives/2009/35638.html
8 @$ A' m6 L8 h# y; {3 w& R' `. Y$ m% S
[pre]文章转摘自http://www.cmykrgb123.cn/blog/string-hash-compare/
& I: {% U5 S+ B  T' k8 N3 m5 K  4 ~0 `- k. x9 X) e" \% T! s" d6 Y
常用的字符串Hash函数还有ELFHash,APHash等等,都是十分简单有效的方法。这些函数使用
/ ]5 x* |6 p  Z7 G0 {位运算使得每一个字符都对最后的函数值产生影响。另外还有以MD5和SHA1为代表的杂凑函数, 9 S7 k7 ^+ Q! ?0 S; ^2 n' u: n' h0 ~; ?* Y
这些函数几乎不可能找到碰撞。 0 I$ d+ A/ C% h
常用字符串哈希函数有BKDRHash,APHash,DJBHash,JSHash,RSHash,SDBMHash,
, M/ S8 d4 I1 T6 N) t. hPJWHash,ELFHash等等。对于以上几种哈希函数,我对其进行了一个小小的评测。
3 e! W) E. w6 u
Hash函数数据1数据2数据3数据4数据1得分数据2得分数据3得分数据4得分平均分
BKDRHash20477448196.5510090.9582.0592.64
APHash23475449396.5588.4610051.2886.28
DJBHash22497547496.5592.31010083.43
JSHash14476150610084.6296.8317.9581.94
RSHash10486150510010051.5820.5175.96
SDBMHash32484950493.192.3157.0123.0872.41
PJWHash302648785130043.89021.95
ELFHash302648785130043.89021.95
( k& O  n. T# n" X  d  R
其中数据1为100000个字母和数字组成的随机串哈希冲突个数。数据2为100000个有意义的英文句 " |. S3 K/ R) ^! \. `0 {
子哈希冲突个数。数据3为数据1的哈希值与1000003(大素数)求模后存储到线性表中冲突的个数。 " c- K  y& j# l0 x+ ]! a  u
数据4为数据1的哈希值与10000019(更大素数)求模后存储到线性表中冲突的个数。 : N6 w) Z7 f2 o
经过比较,得出以上平均得分。平均数为平方平均数。可以发现,BKDRHash无论是在实际效果还是
. n6 ~! b9 s& D! o  b: a编码实现中,效果都是最突出的。APHash也是较为优秀的算法。DJBHash,JSHash,RSHash与
8 Z, n# W6 `! Z7 u, lSDBMHash各有千秋。PJWHash与ELFHash效果最差,但得分相似,其算法本质是相似的。 # h- o) U1 ?* s4 N" V' F
在信息修竞赛中,要本着易于编码调试的原则,个人认为BKDRHash是最适合记忆和使用的。
6 A$ I% @# ]* l( y3 gCmYkRgB123原创,欢迎建议、交流、批评和指正。 8 F) M6 M, R$ h9 X3 n, m
  
# U2 w) \, R* g* [9 e附:各种哈希函数的C语言程序代码 ' |; O: _/ q' x8 J' k9 \/ s

& t% i, X/ z1 t) B  Xunsigned int SDBMHash(char *str)
. u& e* \$ {5 ~4 b9 h{
4 F/ d4 e( {( C$ G' I    unsigned int hash = 0;
( c8 I1 u4 T' r, d  
% j( u" C5 Y3 F. G7 B    while (*str) 7 I% H+ L4 v+ A% _( d6 `# l
    { $ `5 N" _2 ?3 O# y
        // equivalent to: hash = 65599*hash + (*str++);
9 ^% o4 ^( k+ ~0 J        hash = (*str++) + (hash << 6) + (hash << 16) - hash;
8 L. G% `- H, l5 _! [; x8 e6 N    } 7 w* H7 q5 K& N1 c* j" Z2 K
  ) \  a6 i" b" F
    return (hash & 0x7FFFFFFF); 8 P% I) v& N' ]
} * W7 o- v( ?+ Q! W  B
  $ @6 Q5 G" c) h. x- C  i+ O
// RS Hash 6 I, q, R2 Q6 O6 R
unsigned int RSHash(char *str)
0 |$ p4 j+ d( ]' q9 F9 j0 ?, ~{ 0 _" U1 Q; q! {2 n9 h
    unsigned int b = 378551;
* G( p) `1 A- C/ Z1 f    unsigned int a = 63689;
* P3 I& [! @$ Q    unsigned int hash = 0; / Q. ^, N% W! t, A
  . S  P. `9 Y! u) F1 f
    while (*str)
3 Q1 O1 p  V( ]* |9 l# e5 t$ H    {
6 r# a; j, e+ F* |, y) ]4 y. ^        hash = hash * a + (*str++); # V! D8 A" p' S, @
        a *= b;
" E) R& n& F! q2 S9 k4 p7 M    } $ q( X7 G+ z: {4 [
  . k/ _. p5 z! ^6 \
    return (hash & 0x7FFFFFFF); 6 g( S5 G+ ^" U# [9 h
}
5 J  J- k7 X' a" [' x8 r  
4 }! |5 W% L* \, N  D// JS Hash
& D6 z6 P# I; a5 ]: z0 [: aunsigned int JSHash(char *str) 8 A5 R- c: O2 G. U/ c5 V3 @
{
9 G6 w1 a9 Y, q, i4 Y    unsigned int hash = 1315423911;
+ V/ C# x/ E4 a/ x+ r  ; f- z) E" F: s9 O
    while (*str) 7 F0 b* R4 n. b
    {
) j7 m+ D! t% @0 w- L, }        hash ^= ((hash << 5) + (*str++) + (hash >> 2)); 3 g9 b. {6 Z  R( p) ~* C
    }
* h' _4 m* [, a6 E4 O  4 V2 u: z' B2 M' H1 P4 x
    return (hash & 0x7FFFFFFF); 6 S2 @& Z4 U- |" G
} 9 P6 o* x, p/ Q1 a! p3 u$ c
  
% m4 d, r# }- s// P. J. Weinberger Hash
' b4 I  s% H1 @( P0 Dunsigned int PJWHash(char *str)
/ a( C' Q) s# p{
+ e' v' p5 w, S$ \    unsigned int BitsInUnignedInt = (unsigned int)(sizeof(unsigned int) * 8);
) P% @6 u* ^$ R& `1 T: l% r    unsigned int ThreeQuarters    = (unsigned int)((BitsInUnignedInt  * 3) / 4);
( g0 b% @" |) t( C: r    unsigned int OneEighth = (unsigned int)(BitsInUnignedInt / 8);. M7 L+ j- C$ \
    unsigned int HighBits = (unsigned int)(0xFFFFFFFF) << (BitsInUnignedInt [pre]                                               - OneEighth);    unsigned int hash    = 0;    unsigned int test    = 0;     while (*str)    {        hash = (hash << OneEighth) + (*str++);        if ((test = hash & HighBits) != 0)        {            hash = ((hash ^ (test >> ThreeQuarters)) & (~HighBits));        }    }     return (hash & 0x7FFFFFFF);} // ELF Hash unsigned int ELFHash(char *str){    unsigned int hash = 0;    unsigned int x    = 0;     while (*str)    {        hash = (hash << 4) + (*str++);        if ((x = hash & 0xF0000000L) != 0)        {            hash ^= (x >> 24);            hash &= ~x;        }    }     return (hash & 0x7FFFFFFF);} // BKDR Hash unsigned int BKDRHash(char *str){    unsigned int seed = 131; // 31 131 1313 13131 131313 etc..    unsigned int hash = 0;     while (*str)    {        hash = hash * seed + (*str++);    }     return (hash & 0x7FFFFFFF);} // DJB Hash unsigned int DJBHash(char *str){    unsigned int hash = 5381;     while (*str)    {        hash += (hash << 5) + (*str++);    }     return (hash & 0x7FFFFFFF);} // AP Hash unsigned int APHash(char *str){    unsigned int hash = 0;    int i;     for (i=0; *str; i++)    {        if ((i & 1) == 0)        {            hash ^= ((hash << 7) ^ (*str++) ^ (hash >> 3));        }        else        {            hash ^= (~((hash << 11) ^ (*str++) ^ (hash >> 5)));        }    }     return (hash & 0x7FFFFFFF);}[/pre]





欢迎光临 冒险解谜游戏中文网 ChinaAVG (https://chinaavg.com/) Powered by Discuz! X3.2