延时任务之Redis 过期事件监听原理与缺陷

一、实现原理

Redis过期事件监听实现延时任务功能主要基于其发布/订阅(pub/sub)机制和键空间通知功能。具体原理如下:

  • 发布/订阅机制:Redis从2.0版本开始支持发布/订阅功能,该机制类似于消息队列。其中引入了"channel(频道)"的概念,发布者可以向某个频道发布消息,订阅者可以订阅相应的频道以接收消息。
  • 键空间通知 :Redis提供了一些默认的channel用来通知特定事件的发生,其中包括__keyevent@<db>__:expired频道,专门用于通知key的过期事件。这里的<db>是指Redis数据库编号(0-15)。当某个设置了过期时间的key被Redis删除时,Redis会向__keyevent@<db>__:expired频道发布一条消息,通知这个key已过期,消息内容为过期的key名称。
  • 延时任务实现流程 :首先,使用SET key value EX seconds等命令设置一个带有过期时间的键,将任务相关信息存储在value中,过期时间即为任务的延时时间。然后,在应用中启动一个订阅者,订阅__keyevent@<db>__:expired频道。当key到期并被Redis删除时,对应的过期事件消息会发布到该频道,订阅者收到通知后,根据获取到的过期key名称,从Redis或其他存储中获取任务详情,进而执行相应的延时任务逻辑。

二、存在的缺陷

  1. 时效性差

    Redis 删除过期键采用 惰性删除 (访问时才检查)和 定期删除(每隔一段时间批量检查)策略,而非过期瞬间立即删除。因此,过期事件的触发可能存在延迟(极端情况下甚至长时间不触发),导致任务执行时间不准。

  2. 消息丢失风险

    Redis 的 Pub/Sub 是 无状态 的:若订阅者断线重连,断线期间的事件消息会丢失;且 Redis 本身不存储消息,若订阅者处理能力不足,也可能漏处理事件。

  3. 多服务实例下存在消息重复的问题

    Redis 的 pub/sub 模式目前只有广播模式,这意味着当生产者向特定频道发布一条消息时,所有订阅相关频道的消费者都能够收到该消息。

    这个时候,我们需要注意多个服务实例重复处理消息的问题,这会增加代码开发量和维护难度。

相关推荐
Albert Edison2 小时前
【MySQL】表的操作
数据库·mysql·oracle
欢喜躲在眉梢里2 小时前
mysql中的日志
android·运维·数据库·mysql·adb·日志·mysql日志
java1234_小锋2 小时前
Redis线上操作最佳实践有哪些?
数据库·redis·缓存
合作小小程序员小小店3 小时前
web开发,在线%校园,论坛,社交管理%系统,基于html,css,python,django,mysql
数据库·后端·mysql·django·web app
清风6666664 小时前
基于51单片机的空气质量检测PM2.5粉尘检测设计
数据库·单片机·嵌入式硬件·毕业设计·51单片机·课程设计
倔强的石头_5 小时前
【金仓数据库】ksql 指南(一) 连接本地 KingbaseES 数据库与基础交互
数据库
l1t5 小时前
编译Duckdb机器学习插件QuackML
数据库·c++·人工智能·机器学习·插件·duckdb
瑞士卷@5 小时前
JDBC进阶之连接池的配置(Druid与HikariCP)
java·开发语言·数据库
数据皮皮侠AI5 小时前
再发《管理世界》!智能制造试点DID(2000-2023)
大数据·数据库·人工智能·科技·金融·制造