延时任务之Redis 过期事件监听原理与缺陷

一、实现原理

Redis过期事件监听实现延时任务功能主要基于其发布/订阅(pub/sub)机制和键空间通知功能。具体原理如下:

  • 发布/订阅机制:Redis从2.0版本开始支持发布/订阅功能,该机制类似于消息队列。其中引入了"channel(频道)"的概念,发布者可以向某个频道发布消息,订阅者可以订阅相应的频道以接收消息。
  • 键空间通知 :Redis提供了一些默认的channel用来通知特定事件的发生,其中包括__keyevent@<db>__:expired频道,专门用于通知key的过期事件。这里的<db>是指Redis数据库编号(0-15)。当某个设置了过期时间的key被Redis删除时,Redis会向__keyevent@<db>__:expired频道发布一条消息,通知这个key已过期,消息内容为过期的key名称。
  • 延时任务实现流程 :首先,使用SET key value EX seconds等命令设置一个带有过期时间的键,将任务相关信息存储在value中,过期时间即为任务的延时时间。然后,在应用中启动一个订阅者,订阅__keyevent@<db>__:expired频道。当key到期并被Redis删除时,对应的过期事件消息会发布到该频道,订阅者收到通知后,根据获取到的过期key名称,从Redis或其他存储中获取任务详情,进而执行相应的延时任务逻辑。

二、存在的缺陷

  1. 时效性差

    Redis 删除过期键采用 惰性删除 (访问时才检查)和 定期删除(每隔一段时间批量检查)策略,而非过期瞬间立即删除。因此,过期事件的触发可能存在延迟(极端情况下甚至长时间不触发),导致任务执行时间不准。

  2. 消息丢失风险

    Redis 的 Pub/Sub 是 无状态 的:若订阅者断线重连,断线期间的事件消息会丢失;且 Redis 本身不存储消息,若订阅者处理能力不足,也可能漏处理事件。

  3. 多服务实例下存在消息重复的问题

    Redis 的 pub/sub 模式目前只有广播模式,这意味着当生产者向特定频道发布一条消息时,所有订阅相关频道的消费者都能够收到该消息。

    这个时候,我们需要注意多个服务实例重复处理消息的问题,这会增加代码开发量和维护难度。

相关推荐
wespaul几秒前
VeapAI 自然语言操作实战|第 04 篇:系统数据加工——把系统自身的元数据吃成知识
java·大数据·运维·数据库·人工智能
用户84913717547161 分钟前
数据库迁移总出问题?学会这个工具,让团队协作效率翻倍!
数据库·sql
幼儿园蛋小黑3 分钟前
SPI 子系统:从原理到实践
java·前端·数据库
安妮细水长流6 分钟前
【无标题】
数据库·mongodb
KKKlucifer9 分钟前
从规则到大模型:数据分类分级平台的能力分野与场景适配
大数据·数据库·分类
hweiyu0027 分钟前
Redis命令:LPOS
redis·缓存
guo_wen_qiang32 分钟前
云服务器redis主从复制-哨兵模式
运维·服务器·redis
架构师伯子明35 分钟前
QT+Opengl (1):渲染一个三角形
数据库
for_ever_love__39 分钟前
LangGraph State 设计:多节点之间怎么安全地共享数据
redis·mysql·状态模式·checkpoint·state·状态图·langgraph
A-刘晨阳41 分钟前
金仓时序数据库:以高效压缩、快速写入与时序优化,破解工业海量数据管理难题
数据库·时序数据库