RabbitMQ的死信队列的产生与处理

死信队列(Dead Letter Queue, DLQ)

1. 死信(Dead Letter)是怎么产生的?

在 RabbitMQ 中,消息会变成 死信(Dead Letter)的常见情况有以下几种:

  • 消息被拒绝(Rejection)未被重新入队(requeue = false)

    • 当消费者使用 basic.rejectbasic.nack 拒绝消息,并且 requeue 参数设置为 false 时,RabbitMQ 不会重新投递这条消息,而是将其送入死信队列。
  • 消息过期(TTL 过期)

    • 如果队列或消息本身设置了 TTL(Time-To-Live),当消息存活时间超过 TTL 限制时,消息会被认为是死信。
  • 队列达到最大长度(队列满了)

    • 如果队列设置了 最大长度x-max-length)或 最大字节数x-max-length-bytes),当队列达到这个限制时,新来的消息会导致旧消息变成死信。
2. 如何合理地处理死信?

(1)使用死信交换机(DLX, Dead Letter Exchange)

RabbitMQ 允许我们给队列绑定一个死信交换机(DLX),当消息变成死信时,会被自动转发到 死信交换机 ,然后路由到 死信队列(DLQ)。

配置示例:

复制代码
# 创建一个普通队列,并绑定死信交换机
rabbitmqctl set_policy DLX "my-queue" '{"dead-letter-exchange":"dlx-exchange"}' --apply-to queues

这样,my-queue 里的死信消息会被转发到 dlx-exchange 处理。

(2)监控 & 处理死信队列

  • 定期检查 死信队列,找出死信产生的原因。
  • 在死信队列中,可以设置一个消费者来做 重试、记录日志、人工处理 等操作。
  • 结合 TTL + DLX 机制 ,可以实现 延迟消息队列

(3)调整 RabbitMQ 配置,减少死信

  • 合理设置 TTL,避免消息过早进入死信队列。
  • 增加队列长度,防止因队列满了导致消息变成死信。
  • 正确使用 basic.nackbasic.reject,避免误将消息变成死信。

延时队列:

延时队列场景举例:

预定一个会议室,两个小时后开始,要求提前十分钟通知参会人员进行开会。

如果不使用延时队列,那么就需要不断轮询,查看是否到达需要通知的时间,进行消息通知。

延时队列的实现方式:

死信队列+消息有效期

预定时间到提前十分钟通知中间有110分钟,那么创建一条通知消息,设置有效期110分钟丢入队列,不用消费者去监听,等待消息过期后路由到指定的死信队列,再去消费死信队列中的消息即可。
所以延时队列实际上是一种实现方案,而不是一种特定的队列类型。

总结

死信消息(Dead Letter)通常是由于消息被拒绝、过期、队列满了等情况产生的。合理的处理方式是 绑定死信交换机(DLX)+ 监控死信队列 ,这样可以对死信进行 重试、日志分析 ,甚至用于 延迟消息 的场景。

相关推荐
掘金-我是哪吒3 小时前
分布式微服务系统架构第148集:JavaPlus技术文档平台日更
分布式·微服务·云原生·架构·系统架构
JavaGPT3 小时前
Kafka 4.0.0集群部署
分布式·kafka
bug菌4 小时前
一致性设计选择:不同业务场景下,如何做“取舍”?
分布式·后端·架构
bug菌1 天前
CAP定理真的是死结?业务系统到底该怎么取舍!
分布式·后端·架构
龘龍龙1 天前
RabbitMQ-延时队列
分布式·rabbitmq
春马与夏1 天前
Spark on yarn的作业提交流程
大数据·分布式·spark
XiaoQiong.Zhang1 天前
Spark 性能调优七步法
大数据·分布式·spark
yuren_xia1 天前
RabbitMQ核心函数的参数意义和使用场景
分布式·rabbitmq
jstart千语2 天前
【Redisson】锁可重入原理
redis·分布式·redisson
暗离子跃迁2 天前
达梦数据库单机部署dmhs同步复制(dm8->kafka)
linux·运维·数据库·分布式·学习·kafka·达梦数据库