【问题标题】:SuperFastHash returns different hashes for equal strings, but only if determined by different function callsSuperFastHash 为相等的字符串返回不同的哈希值,但前提是由不同的函数调用确定
【发布时间】:2015-10-01 14:46:58
【问题描述】:

所以,我的 SFH 函数:

/*  
 * Hash function (found at: 'http://www.azillionmonkeys.com/qed/hash.html')  
 */ 
int32_t SuperFastHash(const char * data, int len)  {
    uint32_t hash = len, tmp;
    int rem;

    if (len <= 0 || data == NULL) return 0;

    rem = len & 3;
    len >>= 2;

    /* Main loop */
    for (;len > 0; len--) {
        hash  += get16bits (data);
        tmp    = (get16bits (data+2) << 11) ^ hash;
        hash   = (hash << 16) ^ tmp;
        data  += 2*sizeof (uint16_t);
        hash  += hash >> 11;
    }

    /* Handle end cases */
    switch (rem) {
        case 3: hash += get16bits (data);
                hash ^= hash << 16;
                hash ^= ((signed char)data[sizeof (uint16_t)]) << 18;
                hash += hash >> 11;
                break;
        case 2: hash += get16bits (data);
                hash ^= hash << 11;
                hash += hash >> 17;
                break;
        case 1: hash += (signed char)*data;
                hash ^= hash << 10;
                hash += hash >> 1;
    }

    /* Force "avalanching" of final 127 bits */
    hash ^= hash << 3;
    hash += hash >> 5;
    hash ^= hash << 4;
    hash += hash >> 17;
    hash ^= hash << 25;
    hash += hash >> 6;

    // Limits hashes to be within the hash table    
    return hash % HT_LENGTH; 
}

它看起来工作正常,(它应该因为除了最后一行之外的所有内容都没有被我触及)。

这是我将字典加载到哈希表中的函数,这似乎也很有效。

bool load(const char* dictionary)
{
    // declares file pointer
    FILE* dictptr = fopen(dictionary, "r");

    // declare temp index
    uint32_t index = 0;

    // read words, one by one
    while(true)
    {

        // malloc node
        node* new_node = malloc(node_size);

        // insert word into node, if fscanf couldn't scan word; we're done
        if (fscanf(dictptr, "%s", new_node->word) != 1)
        {
            return true;
        }

        // hash word - HASH FUNCTION CALL -
        index = SuperFastHash(&new_node->word[0], sizeof(new_node->word));

        // check if head node has been assigned with value
        if (!strcmp(hashtable[index].word,""))
        {
            // declare hashtable[index] to new_node
            hashtable[index] = *new_node;

            //increment size
            hashtablesize++;
        }

        else
        {
            // if node is initialized, insert after head 
            new_node->next = hashtable[index].next;
            hashtable[index].next = new_node;

            //increment size
            hashtablesize++;
        }
    } 
}

最后,我的检查函数根据哈希表检查单词。

bool check(const char* keyword)
{

    // gets index from SFH
    uint32_t index = SuperFastHash(keyword, sizeof(keyword));

    // declares head pointer to the pointer of the index'd element of hashtable
    node* head = &hashtable[index];

    // if word of head is equal to keyword, return true 
    // else continue down chain till head is null or key is found
    while (head != NULL)
    {
        if (!strcmp(head->word, keyword))
        {
            return true;
        }
        head = head->next;
    }
    return false;
}

注意:当使用不同的哈希函数时,一切正常,所以我怀疑问题出在 len 参数或实际的 SFH 函数中。

我已经用 lldb 检查了返回的索引,比如“cat”不等于“cat”驻留在哈希表中的索引。即加载中函数调用返回的索引。

【问题讨论】:

  • sizeof(keyword) 不正确。这只是给你一个指向char 的指针的大小。根据您的系统是 32 位还是 64 位,始终为 4 或 8。应该是 strlen(keyword)strlen(keyword) + 1 (取决于散列函数是否需要 NUL 终止符 - 我没有仔细看)。解决这个问题,您可能会得到正确的结果。
  • 天哪,太感谢你了,应该已经看到了!再次感谢!

标签: c hashtable hash-function


【解决方案1】:

一些事情......

  1. 正如评论者所说,使用sizeof() 不会为您提供正确的字符串长度。例如,改变

    index = SuperFastHash(&new_node->word[0], sizeof(new_node->word));
    

    index = SuperFastHash(&new_node->word[0], strlen(new_node->word));
    
  2. 您在阅读字典文件后未能调用fclose()。如果fopen()成功,你应该调用fclose()

  3. 以下代码看起来有点可疑:

    // check if head node has been assigned with value
    if (!strcmp(hashtable[index].word,""))
    {
        // declare hashtable[index] to new_node
        hashtable[index] = *new_node;
    
        //increment size
        hashtablesize++;
    }
    

如果哈希表一开始就完全初始化了,是否需要自增hashtablesize?如果哈希表未完全初始化,则在尚未初始化的条目上调用strcmp() 是潜在的麻烦。您没有显示声明或初始化代码,因此不是 100% 清楚这是否真的是一个问题,但可能需要仔细检查。

【讨论】:

  • 谢谢你,完美!是的,fclose() 位于我未包含在帖子中的 unload() 函数中!好吧,hashtablesize 的名字真的很糟糕,因为它更像是一个 wordsloaded 变量!哈希表从一开始就被初始化。
  • fopen() 的返回值存储在局部变量中,因此不确定单独的卸载函数如何访问该变量——这就是我提到它的原因。或者,发布的代码可能与您的实际代码不同?
猜你喜欢
  • 1970-01-01
  • 2014-11-30
  • 1970-01-01
  • 1970-01-01
  • 2021-05-09
  • 2021-09-21
  • 2020-05-13
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多