当前位置: 代码迷 >> J2SE >> 大量数据去重哈希函数算法,求帮助解决方法
  详细解决方案

大量数据去重哈希函数算法,求帮助解决方法

热度:74   发布时间:2016-04-24 12:16:11.0
大量数据去重哈希函数算法,求帮助
需求是 在内存中有上亿条数据 里面很多重复的数据 现在决定用bloom filter 映射到哈希表里,但是用什么哈希算法 不知道 求解答
这个数据是一个通过md5 16位加密后的串 然后又拼接了一个字符串,字符串长度在30左右,

------解决方案--------------------
什么哈希算法?你不是说了用MD5了吗,
这个是java写的MD5例子http://www.bitscn.com/plus/view.php?aid=21188
  相关解决方案