RocketMQ发送消息默认是什么策略,主同步成功了就算成功了?异步写?还是要大部分从都同步了?

文章内容收录到个人网站,方便阅读:hardyfish.top/

资料分享

RocketMQ技术内幕:

RocketMQ 默认的主从同步模式是同步到至少一个从节点后返回发送成功,并不是要求同步到所有从节点或大多数从节点。

以下是详细解释:

1. 默认主从同步规则

1.1 同步到一个从节点

  • SYNC_MASTER 模式下,主节点在消息写入磁盘(同步刷盘)后,会将消息同步到 至少一个从节点
  • 只有主节点确认消息已经成功同步到某个从节点后,才会返回给生产者发送成功。

1.2 不同步所有从节点

  • 默认情况下,RocketMQ 并不会强制要求同步到所有从节点,原因是:

    • 同步到所有从节点会增加延迟。
    • 可能会因为网络或从节点的故障,导致消息发送失败的概率增加。

2. 为什么只需要同步到一个从节点

  1. 数据可靠性保障

    • 同步到至少一个从节点后,即使主节点崩溃,从节点也可以通过主从切换继续提供服务。
    • 这种方式在可靠性和性能之间找到了平衡。
  2. 提升性能

    • 如果要求同步到所有从节点,主节点需要等待所有从节点完成同步,可能显著增加消息发送的延迟。
    • 同步到一个从节点即可显著降低延迟。
  3. 分布式一致性

    • RocketMQ 采用的是 主从复制架构,而非分布式共识协议(如 Raft)。因此,默认只需同步到一个从节点即可满足实际需求。

3. 可调整策略

RocketMQ 的主从同步行为可以通过配置项进行调整。如果需要更高的可靠性,可以使用自定义实现或调整同步逻辑:

  1. SYNC_MASTER 模式

    • 默认同步到一个从节点。
    • 不会等待所有从节点完成同步。
  2. 强一致性需求

    • 如果需要所有从节点同步完成,可以通过修改源码或自定义逻辑实现。
  3. 异步模式(ASYNC_MASTER)

    • 主节点不等待从节点同步完成,直接返回生产者发送成功,提升吞吐量,但会降低可靠性。

4. 总结

在 RocketMQ 默认的 SYNC_MASTER 模式下,主节点需要 同步到至少一个从节点 后,才返回发送成功。

这种策略在可靠性和性能之间找到了良好的平衡:

  1. 同步到一个从节点:保证主节点崩溃时,至少一个从节点有完整的数据。
  2. 不要求同步所有从节点:避免增加消息发送的延迟。

如果对一致性有更高要求,可以通过自定义实现强制同步到所有从节点,但需权衡性能影响。

相关推荐
再吃一根胡萝卜1 小时前
08 · 前端:Vue3 + SSE 流式与执行链路可视化
面试
再吃一根胡萝卜1 小时前
03 · 后端:FastAPI 与分层架构
面试
vx-Biye_Design1 小时前
SSM伴侣动物伴护星小程序06330-计算机课程设计、毕业设计
spring boot·后端·elasticsearch·小程序·架构·课程设计·idea
2分钟速写快排3 小时前
什么是 RAG?如何用 RAG 实现一个用户记忆?
前端·后端·ai编程
面向Google编程3 小时前
Apache Iceberg Variant 类型:v3 半结构化数据不再「二选一」
大数据·后端
lhldsg4 小时前
全民健身解决方案小程序开发:从0到1的技术实战
java·数据库·需求分析
jason成都4 小时前
Spring WebFlux 适配达梦新方案|dm‑r2dbc:Netty 异步传输的实验性 R2DBC 驱动
java·后端·spring
泡海椒4 小时前
内置SPI函数库详解:JQuick-Java Builtin工具类实战用法
java·开发语言·python
辰烨chenye4 小时前
LeetCode Hot 100 题解 · 二分篇
java·算法·leetcode
小羊没烦恼!5 小时前
Hello Web API系列教程——Web API与国际化
java·服务器·前端·javascript·php