布隆过滤器(Bloom Filter)

布隆过滤器(Bloom Filter)是一种基于 Bitmap 的概率数据结构,它用于快速判断一个元素是否在一个集合中。虽然它不能完全准确地告诉你一个元素一定在集合中,但它可以非常确定地告诉你一个元素不在集合中。换句话说,它可能会产生假阳性(认为元素在集合中,但实际上不在),但不会产生假阴性(认为元素不在集合中,但实际上在)。

工作原理

布隆过滤器使用多个哈希函数将元素映射到一个位数组(Bitmap)上。以下是具体步骤:

  1. 初始化位数组:初始化一个全为 0 的位数组(长度为 m)。
  2. 添加元素:当你想添加一个元素到布隆过滤器中时,通过 k 个不同的哈希函数来计算该元素的 k 个哈希值。每个哈希值对应位数组中的一个位置,将这些位置的值设置为 1。
  3. 查询元素:当你想查询一个元素是否在布隆过滤器中时,同样通过 k 个哈希函数计算该元素的 k 个哈希值。检查位数组中这 k 个位置的值,如果都为 1,则可能在集合中;如果有任何一个位置为 0,则一定不在集合中。

举例说明

假设我们有一个布隆过滤器,位数组长度为 10(m=10),并使用 3 个哈希函数(k=3)。我们想添加和查询几个元素。

添加元素
  1. 添加元素 “apple”

    • 通过 3 个哈希函数得到哈希值:H1("apple") = 1H2("apple") = 4H3("apple") = 7
    • 将位数组中第 1、4、7 位设为 1。

    位数组变为:[0, 1, 0, 0, 1, 0, 0, 1, 0, 0]

  2. 添加元素 “banana”

    • 通过 3 个哈希函数得到哈希值:H1("banana") = 2H2("banana") = 5H3("banana") = 8
    • 将位数组中第 2、5、8 位设为 1。

    位数组变为:[0, 1, 1, 0, 1, 1, 0, 1, 1, 0]

查询元素
  1. 查询元素 “apple”

    • 通过 3 个哈希函数得到哈希值:H1("apple") = 1H2("apple") = 4H3("apple") = 7
    • 检查位数组中第 1、4、7 位,都是 1,所以 “apple” 可能在集合中。
  2. 查询元素 “banana”

    • 通过 3 个哈希函数得到哈希值:H1("banana") = 2H2("banana") = 5H3("banana") = 8
    • 检查位数组中第 2、5、8 位,都是 1,所以 “banana” 可能在集合中。
  3. 查询元素 “cherry”

    • 通过 3 个哈希函数得到哈希值:H1("cherry") = 0H2("cherry") = 3H3("cherry") = 6
    • 检查位数组中第 0、3、6 位,发现第 0 位是 0,所以 “cherry” 一定不在集合中。

布隆过滤器的特点

  • 高效性:布隆过滤器占用的空间非常小,而且查询和插入操作都非常快,时间复杂度为 O(k),其中 k 是哈希函数的数量。
  • 可能产生假阳性:它可能会错误地认为某个不在集合中的元素存在于集合中,但不会漏掉任何实际存在的元素。
  • 不可删除元素:标准的布隆过滤器不支持删除元素,因为删除操作可能会误删其他元素的标记。

用法

布隆过滤器在需要高效地判断元素是否存在的场景中非常有用,比如:

  • 数据库缓存:检查一个数据是否已经在缓存中。
  • 网络黑名单:快速判断一个 IP 是否在黑名单中。
  • 4
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
布隆过滤器Bloom Filter)是一种重要的数据结构,它用于快速判断一个元素是否存在于一个集合中。布隆过滤器的核心思想是通过一系列哈希函数来对元素进行多次哈希,然后将得到的哈希值映射到一个位数组中,并将对应的位置设为1。当需要判断一个元素是否存在时,同样对其进行多次哈希,检查对应位数组的值是否都为1,若都为1则可以确定元素可能存在;若存在一个0,则可以确定元素一定不存在。因此,布隆过滤器是一种基于概率的数据结构,可以高效地进行查找。 然而,布隆过滤器也存在一些问题。首先,由于多个不同的元素可能会哈希到相同的位上,因此在查询时可能出现误判,即判断一个元素存在时实际上并不存在。这种误判是由于多个元素共享了某一位的原因导致的。其次,布隆过滤器的特性决定了它无法支持元素的删除操作,因为删除一个元素可能会影响其他元素的判断结果,从而增加误判率。 要注意的是,计数布隆过滤器(Counting Bloom Filter)提供了一种实现删除操作的可能性,但并不能保证在后续查询时该值一定返回不存在。因此,不能说计数布隆过滤器支持删除,而是说计数布隆过滤器提供了实现删除的可能。 [3<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [【海量数据处理】布隆过滤器BloomFilter](https://blog.csdn.net/qq_43727529/article/details/127180864)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *3* [Java --- redis7之布隆过滤器BloomFilter](https://blog.csdn.net/qq_46093575/article/details/130613434)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

SHUIPING_YANG

你的鼓励是我创作的最大动力。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值