202526 | 消息队列MQ

消息队列(MQ)全面解析

一、消息队列核心价值

MQ核心能力 解耦 异步 削峰 生产者消费者互不感知 非阻塞调用 缓冲突发流量


二、同步 vs 异步调用对比
维度 同步调用 异步调用(MQ)
通信方式 实时等待响应 触发后立即返回
耦合度 强依赖服务地址 仅依赖消息格式
性能 RT=所有下游耗时之和 RT≈自身处理时间
可靠性 级联失败风险 消息持久化+重试机制
典型场景 支付验证、实时查询 日志处理、订单状态更新

调用流程对比
Client Service Downstream MQ DB 请求 同步调用 响应 返回结果 请求 发消息 立即返回 消费消息 异步处理 Client Service Downstream MQ DB


三、MQ技术选型指南
1. 主流MQ对比
MQ 吞吐量 延迟 顺序保证 事务支持 适用场景
Kafka 100万+/s 毫秒级 ✔️ ✖️ 日志/大数据管道
RocketMQ 10万+/s 毫秒级 ✔️ ✔️ 电商/金融交易
RabbitMQ 1万+/s 微秒级 ✖️ ✔️ 企业级应用
Pulsar 100万+/s 毫秒级 ✔️ ✔️ 多租户/实时分析
2. 选型决策树

是 否 是 否 是 否 需要消息顺序? Kafka/RocketMQ 需要事务? RocketMQ/RabbitMQ 需要高吞吐? Kafka/Pulsar RabbitMQ


四、MQ监控指标体系
指标 正常范围 危险阈值
消息堆积量 < 1万 > 5万
生产消费速率差 < 10% > 30%持续5min
平均处理延迟 < 500ms > 2s
消费者存活数 = 部署实例数 < 50%实例数

五、生产环境最佳实践
1. 可靠性保障
  1. 开启confirm 2. 镜像队列 3. 手动ACK 4. 死信队列 生产者 MQ 集群节点 消费者 异常处理
2. 性能优化
  • Kafkanum.io.threads=CPU核心数*2
  • RabbitMQchannel_max=2047
  • RocketMQsendMessageThreadPoolNums=32
**3. 典型故障处理

是 否 是 否 发现堆积 是否消费卡住? 扩容消费者 是否生产激增? 限流生产端 检查网络/磁盘

相关推荐
叫我阿柒啊22 分钟前
从Java全栈到前端框架:一次真实面试的深度复盘
java·spring boot·typescript·vue·database·testing·microservices
点云SLAM23 分钟前
C++ 常见面试题汇总
java·开发语言·c++·算法·面试·内存管理
sniper_fandc27 分钟前
IDEA修改系统缓存路径,防止C盘爆满
java·ide·intellij-idea
aristo_boyunv33 分钟前
拦截器和过滤器(理论+实操)
java·数据仓库·hadoop·servlet
半夏陌离42 分钟前
SQL 入门指南:排序与分页查询(ORDER BY 多字段排序、LIMIT 分页实战)
java·前端·数据库
CUIYD_19891 小时前
Eclipse 常用搜索功能汇总
java·ide·eclipse
野犬寒鸦2 小时前
力扣hot100:相交链表与反转链表详细思路讲解(160,206)
java·数据结构·后端·算法·leetcode
ytadpole2 小时前
揭秘设计模式:工厂模式的五级进化之路
java·设计模式
计算机毕业设计木哥2 小时前
计算机毕设选题:基于Python+Django的B站数据分析系统的设计与实现【源码+文档+调试】
java·开发语言·后端·python·spark·django·课程设计
失散132 小时前
分布式专题——1.2 Redis7核心数据结构
java·数据结构·redis·分布式·架构