RabbitMQ的死信队列

死信队列的概念

死信(Dead Letter)是消息队列中的一种特殊消息,是指没有办法被正常消费或者处理的消息,例如消息过期、消息被拒绝、队列满了

RabbitMQ的私信队列就专门用来存储这些死信消息

死信的来源

  1. 消息被拒绝(Rejection)

    消费者显式拒绝接收某条消息,并且不希望该消息被重新投递时,这条消息会进入死信队列。

  2. 消息超时(TTL Expiration)

    消息的生存时间(Time-To-Live, TTL)超过了指定的时长,而消息仍未被消费,这样的消息会被转移到死信队列。

  3. 队列长度超限(Queue Overflow)

    当消息队列的长度达到最大限制,再有新消息进入时,多出来的消息可能会被直接移动到死信队列。

  4. 重试次数达到上限

    某些消息在多次消费尝试失败(如因业务逻辑异常)后,达到最大重试次数后进入死信队列。

死信队列的应用场景

对于RabbitMQ来说,死信队列是可以存储不能被正确消费的信息的,可以通过消费死信队列中的内容来分析可能出现的异常情况,可以用于改善和优化系统

可以用于比如说消息重试,丢弃,日志收集,人工处理等

常见的死信队列实现

  1. RabbitMQ

    RabbitMQ 支持通过设置队列的死信交换机(Dead Letter Exchange, DLX)来实现死信队列。当消息变为死信时,RabbitMQ 会将它们转发到绑定在 DLX 上的队列中。

  2. Kafka

    在 Kafka 中,可以通过专门的主题(Topic)充当死信队列。开发者需要在消费失败时显式地将消息发送到死信主题。

  3. AWS SQS(Simple Queue Service)

    AWS SQS 支持直接配置死信队列,开发者可以设置消息的最大重试次数,超出后消息会被自动转移到死信队列。

  4. RocketMQ

    RocketMQ 通过 DLQ 专用主题处理死信消息,每个消费组都有一个死信主题,格式通常为 %DLQ%+ConsumerGroupName。

相关推荐
真上帝的左手4 小时前
30. 技术专题-‌应用框架组件-分布式架构
分布式·架构·系统架构·分布式架构
zixu_star18 小时前
从单机到分布式:定时任务如何处理大量数据与执行失败?
分布式
lsc_blog1 天前
听到优化风声,先准备能由自己掌控的事
数据库·分布式·中间件·职场和发展·重构
Lansonli3 天前
大数据Spark(八十七):Spark-Submit 参数详解
大数据·分布式·spark
qq_452396233 天前
第二篇:《CommitLog + ConsumeQueue:一条日志解决 Kafka 多分区随机写的难题》
分布式·kafka
Alluxio3 天前
Alluxio + OCI:为 AI 工作负载实现亚毫秒访问延迟与可扩展吞吐
运维·数据库·人工智能·分布式·缓存·ai·语言模型
阿卡好可爱4 天前
Lua 热更新不生效:改完文件线上仍是旧逻辑,package.loaded 与 upvalue 重绑定详解
数据结构·分布式·后端·架构·lua
方方洛6 天前
ray教程-28-附录G-CICD与Slurm与云上调度
人工智能·分布式·机器学习
空奈qwq6 天前
【Kafka 从入门到实战】从手写一个队列到生产级消息中间件:架构、分区、消费组、零拷贝全解析
分布式·架构·kafka