Redis中使用布隆过滤器解决缓存穿透问题

一、缓存穿透(失效)问题

缓存穿透是指查询一个一定不存在的数据,由于缓存中没有命中,会去数据库中查询,而数据库中也没有该数据,并且每次查询都不会命中缓存,从而每次请求都直接打到了数据库上,这会给数据库带来巨大压力。

二、布隆过滤器原理

布隆过滤器(Bloom Filter)是一种空间效率很高的随机数据结构,它利用多个不同的哈希函数将一个元素映射到一个位数组中的多个位置,并将这些位置的值置为 1。

当查询一个元素时,同样使用这些哈希函数计算出多个位置,如果这些位置上的值都为 1,那么这个元素可能存在;如果有任何一个位置上的值为 0,那么这个元素一定不存在。

布隆过滤器存在一定的误判概率,即可能会把不存在的元素判断为存在,但不会把存在的元素判断为不存在。

三、使用 Redis 中的布隆过滤器解决缓存穿透问题的代码

  1. 引入依赖
xml 复制代码
<dependency>
       <groupId>org.redisson</groupId>
       <artifactId>redisson</artifactId>
       <version>3.21.1</version>
   </dependency>
  1. 代码实现
java 复制代码
import org.redisson.Redisson;
   import org.redisson.api.RBloomFilter;
   import org.redisson.api.RedissonClient;

   public class BloomFilterCache {
       private final RedissonClient redissonClient;
       private final RBloomFilter<String> bloomFilter;

       public BloomFilterCache() {
           redissonClient = Redisson.create();
           // 创建布隆过滤器,预计插入 10000 个元素,误判率为 0.01
           bloomFilter = redissonClient.getBloomFilter("myBloomFilter");
           bloomFilter.tryInit(10000, 0.01);
       }

       public boolean mightContain(String key) {
           return bloomFilter.contains(key);
       }

       public void add(String key) {
           bloomFilter.add(key);
       }

       public void close() {
           redissonClient.shutdown();
       }

       public static void main(String[] args) {
           BloomFilterCache bloomFilterCache = new BloomFilterCache();

           // 添加一些可能存在的键
           bloomFilterCache.add("key1");
           bloomFilterCache.add("key2");

           // 查询键是否可能存在
           System.out.println(bloomFilterCache.mightContain("key1")); // true
           System.out.println(bloomFilterCache.mightContain("key3")); // false

           bloomFilterCache.close();
       }
   }

在上述代码中,首先创建了一个 Redisson 客户端,并初始化了一个布隆过滤器。mightContain方法用于判断一个键是否可能存在于布隆过滤器中,add方法用于向布隆过滤器中添加一个键。

使用布隆过滤器可以在缓存之前进行快速判断,减少对数据库的不必要查询,从而有效地解决缓存穿透问题。

获取到缓存失效后改怎么处理?

  1. 返回异常信息,业务流程往下走
  2. 记录对应的日志信息
  3. 异步缓存key到redis
    1. 当使用布隆过滤器判断某个 key 不存在时,触发一个异步任务。
    2. 异步任务从可能的数据来源(如数据库、外部 API 等)获取该 key 对应的数据。
    3. 如果获取到数据,将其存入缓存(Redis 或其他缓存系统),以便下次查询时能够快速响应。
相关推荐
StarRocks_labs3 小时前
StarRocks Community Monthly Newsletter (Jun)
数据库·starrocks·数据湖·物化视图·存算分离
光电的一只菜鸡4 小时前
ubuntu之坑(十五)——设备树
linux·数据库·ubuntu
ob熔天使——武4 小时前
MySQL
数据库·mysql
小光学长5 小时前
基于vue框架的防疫物资仓库管理系统09y38(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面。
数据库
醇醛酸醚酮酯5 小时前
多线程是如何保证数据一致和MESI缓存一致性协议
缓存
野生技术架构师8 小时前
MySQL数据实时同步到Elasticsearch的高效解决方案
数据库·mysql·elasticsearch
白仑色8 小时前
Oracle 高可用性与安全性
数据库·oracle·数据安全·goldengate·高可用架构
紫无之紫9 小时前
SQL性能调优经验总结
数据库·sql·性能调优
CZZDg10 小时前
Redis Sentinel哨兵集群
java·网络·数据库
__风__10 小时前
PostgreSQL ExecInitIndexScan 函数解析
数据库·postgresql