布隆过滤器文章查重

问：如何用布隆过滤器去重mysql

1. 答：在数据库中创建字段的UNIQUE属性
   在数据库中创建一个唯一的索引，在插入数据之前检查待插入的数据是否存在
   使用Set或HashSet保存数据，确保唯一

问：推荐系统去重

1. 答：1 推荐的文件都会选择近期的文章
   2 推荐文章按照兴趣点找出来
   3 已推荐的文章,存储在本地,从服务器上down下后，和本地对比，减少服务器压力
   尽量的去缩小数据范围，减少服务器端数据的存储
2. 答：七言古诗石鱼湖上醉歌·并序(元结)
3. 答：我就知道这个要用到算法。。。

问：布隆过滤器的检索效率为什么快于哈希算法

1. 答：bloom filter的特点是会出现误报，但不会漏报，也就是说对于bloom filter验证的一个数据文件，可能不包含你查找的数据项，但是包含你查找的数据项的数据文件它一定是会返回的，key-value系统中bloom filter返回的数据文件还是需要查看里面的内容...

问：布隆过滤器的缺点

1. 答：但是布隆过滤器的缺点和优点一样明显。误算率是其中之一。随着存入的元素数量增加，误算率随之增加。但是如果元素数量太少，则使用散列表足矣。
   另外，一般情况下不能从布隆过滤器中删除元素。我们很容易想到把位列阵变成整数数组，每插入一个元素相应的计数器加1, 这样删除元素时将计数器减掉就可以了。然而要保证安全的删除元素并非如此简单。首先我们必须保证删除的元素的确在布隆过滤器里面. 这一点单凭这个过滤器是无法保证的。另外计数器回绕也会造成问题。
   在降低误算率方面，有不少工作，使得出现了很多布隆过滤器的变种。

问：基于布隆过滤器的非法URL识别，有没有能用Java

1. 答：小兄弟，我没听说过 布隆过滤器，
   LOL 里面 有个拿盾牌的壮汉，好像也叫这个名字。
2. 答：你百度搜到的一般都可以用啊，实在不行就去开源中国或者github看看 一搜一大堆