RabbitMQ 之消息积压

1. 什么是消息积压

当消息数量不断增大,超过了消费者的消费能力,就会造成消息一直存放在队列中无法被消费。

2. 为什么会产生消息积压

  • 生产者生产消息过快:生产者发送消息的速度超过了消费者消费消息的速度,就会造成消费者无法即时消费新消息,导致消息堆积
  • 消费者消费消息速度过慢:
    • 消费消息的业务逻辑复杂,耗时长
    • 消费者代码性能低
    • 内存、CPU 等资源限制
    • 消费者代码出现异常
  • 网络原因:网络不稳定或延迟,导致消费者发送的 ack 无法被服务器接收或丢失,若设置了消息重新入队列,就会造成消息重新发送,也会造成消息积压
  • RabbitMQ 服务器配置偏低

3. 如何处理消息积压

  • 提高消费者消费效率:
    • 优化消费者代码逻辑
    • 设置 prefetch 参数,限制队列最多能容纳消息的数量
    • 当处理消息发生异常时,将消息放入死信队列
  • 降低生产者发送消息的速度:
    • 流量控制:根据消费者处理消息的速率,动态控制生产者发送消息的速率
    • 限流:使用限流工具,为消息发送速率设置一个上限
  • 升级 RabbitMQ 服务器配置
相关推荐
donk131410 分钟前
React Native for OpenHarmony 实战:三方库 react-native-step-indicator 的鸿蒙化适配指南
分布式·react native·react.js·wpf·harmonyos
梅菲塔亚3 小时前
Ceph分布式存储
分布式·ceph
acrel74 小时前
Acrel-1000系列分布式光伏监控系统在湖北荆门一马光彩大市场屋顶光伏发电项目中应用
分布式·光伏并网
程序 代码狂人5 小时前
金融数仓体系与核心业务知识详解
大数据·分布式·spark
java_nnnn7 小时前
Redis 初识:从单体架构到分布式架构的演进
redis·分布式·架构
Sayai7 小时前
Kafka 2.8→3.9.1 跨大版本升级实战:ZooKeeper 同步升级、数据目录迁移与回滚预案全流程
大数据·运维·分布式·zookeeper·kafka
敲上瘾8 小时前
分布式系统——Redis哨兵:自动故障转移与选举原理
linux·数据库·redis·分布式·缓存·微服务
微三云 - 廖会灵 (私域系统开发)1 天前
供应链系统实战:多渠道订单聚合与分布式库存一致性方案总结
开发语言·分布式·php
她说可以呀1 天前
Docker 镜像的两种创建方式
java·分布式·docker