5.布隆过滤器

最新推荐文章于 2022-08-25 15:08:05 发布
最新推荐文章于 2022-08-25 15:08:05 发布
阅读量536 收藏
点赞数
分类专栏： 数据结构与算法 文章标签： 数据结构 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Niel_3/article/details/121518340
版权

布隆过滤器 哈希 数据结构 误判率 存储优化
关键词由CSDN通过智能技术生成

讲完了hashmap，继续将关于hash的其他用途

布隆过滤器就是另一种经典用法，他是用来快速判断一个key是否存在的方法

通过这个key进行多次hash运算得到多个值，比如通过三次hash得到三个不同的值，

然后写入数组中对应值得下标的位置，都标为1

那么下次来查询的时候，我同样通过对这个key进行三次同样的hash运算得到三个值，

如果三个值对应到数组的下标的位置都有值，那么可能存在(因为有可能不同的值的hash冲突)，

如果至少有一个没有值，那么就一定不存在

kyhoon
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
哈希一刀流——布隆过滤器详解
qq_61500888的博客
10-21 2767
带你一命通关 C++ 布隆过滤器 十分钟手撕哈希内涵
redis基础篇——布隆过滤器
石灰聪的博客
12-01 863
布隆过滤器 在1970年的时候，有一个叫做布隆的前辈对于判断海量元素中元素是否存在的问题进行了研究，也就是到底需要多大的位图容量和多少个哈希函数，它发表了一篇论文，提出的这个容器就叫做布隆过滤器。 工作原理 首先，布隆过滤器的本质就是一个位数组和若干个哈希函数。 集合里面有3个元素，要把它存到布隆过滤器里面去，应该怎么做？首先是a元素，这里我们用3次计算。b.c元素也一样。 元素已经存进去之后，现在我要来判断一个元素在这个容器里面是否存在，就要使用同样的三个函数进行计算。 比如d元素，我用第一
哈希的应用 —— 布隆过滤器
2021dragon的博客
08-25 1820
布隆过滤器是由布隆（Burton Howard Bloom）在1970年提出的一种紧凑型的、比较巧妙的概率型数据结构，特点是高效地插入和查询。布隆过滤器其实就是位图的一个变形和延申，虽然无法避免存在哈希冲突，但我们可以想办法降低误判的概率。当一个数据映射到位图中时，布隆过滤器会用多个哈希函数将其映射到多个比特位，当判断一个数据是否在位图当中时，需要分别根据这些哈希函数计算出对应的比特位，如果这些比特位都被设置为1则判定为该数据存在，否则则判定为该数据不存在。
布隆过滤器的原理和使用条件
10-19 743
what.布隆过滤器是什么 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-yEuGh8ag-1603084800407)(https://upload.wikimedia.org/wikipedia/commons/a/ac/Bloom_filter.svg “示意图”)] 和java的hashmap类似，布隆过滤器(后面用BF代替)是一个使用hash算法+bit数组实现的数据结构，一般只提供add()/contains() 两个接口. BF比hashmap使用更少的存储空间
布隆过滤器设置合适指标
ttaannkkee的博客
10-11 6466
布隆过滤器用于快速检测不存在数据，主要用位数组的结构来存储。其中为了保证布隆过滤器有适当的正确率通常会设置几个参数。 设： k = hash函数个数，用于将一个数据通过不同hash函数计算为不同值，如“test” hash1-> 10,hash2-> 91, hash3->88等等，其中hash值即为位数组下标。如上面计算的三个值则位数组上坐标为10、91、88的位置上会被标......
Python+Redis实现布隆过滤器
01-21
布隆过滤器是什么 　布隆过滤器（Bloom Filter）是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以用于检索一个元素是否在一个集合中。它的优点是空间效率和查询时间都比...
python使用布隆过滤器的实现示例
09-16
【布隆过滤器详解】 布隆过滤器是一种空间效率极高的概率型数据结构，用于判断一个元素是否可能在一个集合中。它可能会误判，但不会漏判，即它可能会将不存在的元素判断为存在，但不会将存在的元素判断为不存在。...
java实现的布隆过滤器算法
07-27
5. **误判率**：布隆过滤器的误判率与位数组的大小、哈希函数的数量以及插入的元素数量有关。误判率可以通过数学公式进行计算，但实际应用中通常需要通过实验调整参数以达到理想的平衡。 6. **空间效率**：相比于...
简单实现的布隆过滤器
12-02
自动清空过滤器内部信息的使用比率，传null则表示不会自动清理，当过滤器使用率达到100%时，则无论传入什么数据，都会认为在数据已经存在了当希望过滤器使用率达到80%时自动清空重新使用，则传入0.8
redis使用布隆过滤器
热门推荐
sora33的博客
07-11 1万+
介绍布隆过滤器以及用法，项目中如何使用，如何解决redis穿透
布隆过滤器(Bloom Filter)详解——基于多hash的概率查找思想
djph26741的博客
12-23 288
转自：http://www.cnblogs.com/haippy/archive/2012/07/13/2590351.html 布隆过滤器［1］（Bloom Filter）是由布隆（Burton Howard Bloom）在1970年提出的。它实际上是由一个很长的二进制向量和一系列随机映射函数组成，布隆过滤器可以用于检索一个元素是否在一个集合中。它的优点是空间...
布隆过滤器及常用的字符串哈希算法
月光骆驼的博客
06-10 3520
先把这个元素作为k个哈希函数的输入，拿到k个数组位置，然后把所有的这些位置置为1。
布隆过滤器之HASH算法（Java版）
关于代码的那些事
09-21 2072
布隆过滤器使用二进制向量结合hash函数来记录任意一条数据是否已经存在于集合中。 布隆过滤器的执行流程为： 首先申请包含SIZE个bit位的Bit集合，并将所有Bit置0。 然后使用数种（k）不同的哈希函数对目标数据进行哈希计算并得到k个哈希值（确保哈希值不超过SIZE大小），然后将Bit集合中以哈希值为下标所处的bit值置为1，由于使用了k个哈希函数，因此记录一条数据的信息将在Bit集合中把...
海量数据去重hash与布隆过滤器
qq_46118239的博客
02-26 1069
海量数据去重hash与布隆过滤器背景缓存穿透需求set和mapunordered_map总结布隆过滤器代码 背景 在使⽤word⽂档时，word如何判断某个单词是否拼写正确？ ⽹络爬⾍程序，怎么让它不去爬相同的url⻚⾯？允许有误差 垃圾邮件（短信）过滤算法如何设计？允许有误差 公安办案时，如何判断某嫌疑⼈是否在⽹逃名单中？控制误差 假阳率 缓存穿透问题如何解决？允许有误差 缓存穿透 描述缓存场景，为了减轻落盘数据库（mysql）的访问压⼒，在server端与mysql之间加⼊⼀层缓冲数据层（⽤来存
海量数据去重、HASH、布隆过滤器介绍
hjlogzw的博客
02-13 830
面试知识点之海量数据去重、哈希函数、布隆过滤器介绍
布隆过滤器与哈希
weixin_43512657的博客
06-30 1296
1.布隆过滤器 什么是布隆过滤器呢？它是一种类似哈希的数据结构，通过这个数据结构，可以快速的插入和查询，确定某个事件一定不存在或可能存在。特点是占用空间少，缺点是返回的结果是概率性，有一定误差，在方案选型时，需要注意这些特点。 2.布隆过滤器数据结构 布隆过滤器是一个bit向量或bit数组，如下图所示，bit的存储是耗内存，但是key的增加，反而不耗内存，因为不存储key。 当一个元素加入集合时，就通过K个hash函数将这个映射成一个位数组中的K个点，把它们置为1。当查询时，只要检查这些点是否全为1，就能
布隆过滤器原理和基于BloomFilter的误判率展示
二祥的工作历程
03-21 2072
布隆过滤器 布隆过滤器原理 布隆过滤器是由n个Hash函数和一个二进制数组组成。 如图所示（参考，hash函数可以多个） 1.保存操作 发来一个请求数据hello 对数据hello经过三次hash运算，分别得到三个值（假设1，3，5）。 在对应的二进制数组里，将下标为1，3，5的值置为1。 这样hello数据就保存了。 2.查询操作 发来一个请求数据hello 对数据hello经过三次hash运算，分别得到三个值（假设1，3，5）。 在二进制数组里，将下标为1，3，5的值取出来，如果都为1，则表示该
布隆过滤器实现(哈希+位图)
HanSion.Z
09-10 2380
布隆过滤器(bloomfiliter) 布隆过滤器是哈希和位图的变形，它的基本思想是：通过一个Hash函数将一个元素映射成一个位矩阵中的一个点，我们只需查看这个位置是1还是0就知道集合中是否存在它。但是由于哈希冲突的原因，即不同的元素经过散列函数后可能产生相同的哈希地址，我们很可能导致误判。为了降低误判的概率，我们将一个元素经过多个散列函数映射到多个位上，如果这几个位都为1，我们认为它是存在的；...
盛最多水的容器
kyhoon
12-22 804
双指针解决容量问题
3.布隆过滤器是如何实现均匀的散列值分布?
最新发布
05-12
布隆过滤器的实现依赖于多个哈希函数，这些哈希函数需要满足以下两个条件： 1. 哈希函数的值域范围应该大于等于布隆过滤器中位数组的长度，这可以确保哈希函数可以将所有的键值映射到位数组中。 2. 哈希函数应该...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值