布隆过滤器笔记

课程地址

布隆过滤器由一个很长的二进制向量一系列哈希函数组成

特性:布隆过滤器可以告诉我们 "某样东西一定不存在 或者可能存在",也就是说布隆过滤器说这个数不存在则一定不存在,布隆过滤器说这个数存在可能不存在。这个特性能很好地被用于解决 "Redis 缓存穿透"的问题

原理:使用多个哈希函数将同一个键值映射到不同的位置,所以布隆过滤器的时间复杂度是 O(h),其中 h 是哈希函数的个数

判断是否存在:

python 复制代码
exist = all(bitmap[hash(key)] == 1 for hash in hashers)

事实上,不同的 key 可能被映射到同一个哈希值。例如下面的例子中"你好"和 "hello" 都被映射到下标 2,出现了哈希冲突:

使用多个 hash 函数的目的就是为了避免哈希冲突导致的误判

在实际的布隆过滤器工具包中,误判率是可以配置的,且误判率越低,需要的 bitmap 越长,需要的 hash 函数个数越多,运行时间也越长

布隆过滤器的优点:

  • 速度快,空间省
  • 保密性强,不存储元素本身,只计算哈希

但是受到二进制只能存储 2 种状态的限制,布隆过滤器不能删除元素

相关推荐
倔强的石头1069 分钟前
从 Oracle 到 KingbaseES:破解迁移痛点,解锁信创时代数据库新可能
数据库·oracle·金仓数据库
2301_8002561111 分钟前
8.3 查询优化 核心知识点总结
大数据·数据库·人工智能·sql·postgresql
塔能物联运维15 分钟前
设备断网时数据丢失,后来启用本地缓存+异步重传队列
java·开发语言·缓存
wan55cn@126.com17 分钟前
人生如戏:换个片场,继续出演
人工智能·笔记·百度·微信
三七吃山漆26 分钟前
攻防世界——supersqli
数据库·网络安全·web·ctf
零日失眠者32 分钟前
【Oracle入门到删库跑路-08】核心技能:用户和权限管理
数据库·oracle
QT 小鲜肉1 小时前
【孙子兵法之中篇】009. 孙子兵法·行军篇
人工智能·笔记·读书·孙子兵法
我科绝伦(Huanhuan Zhou)1 小时前
Oracle控制文件、SCN与检查点机制深度解析及数据库初始化原理
运维·数据库·oracle
LO嘉嘉VE1 小时前
学习笔记二十五:支持向量机-核函数
笔记·学习·支持向量机
你不是我我1 小时前
【Java 开发日记】我们来说一说 Redis IO 多路复用模型
java·开发语言·redis