RocketMQ发送消息默认是什么策略,主同步成功了就算成功了?异步写?还是要大部分从都同步了?

文章内容收录到个人网站,方便阅读:hardyfish.top/

资料分享

RocketMQ技术内幕:

RocketMQ 默认的主从同步模式是同步到至少一个从节点后返回发送成功,并不是要求同步到所有从节点或大多数从节点。

以下是详细解释:

1. 默认主从同步规则

1.1 同步到一个从节点

  • SYNC_MASTER 模式下,主节点在消息写入磁盘(同步刷盘)后,会将消息同步到 至少一个从节点
  • 只有主节点确认消息已经成功同步到某个从节点后,才会返回给生产者发送成功。

1.2 不同步所有从节点

  • 默认情况下,RocketMQ 并不会强制要求同步到所有从节点,原因是:

    • 同步到所有从节点会增加延迟。
    • 可能会因为网络或从节点的故障,导致消息发送失败的概率增加。

2. 为什么只需要同步到一个从节点

  1. 数据可靠性保障

    • 同步到至少一个从节点后,即使主节点崩溃,从节点也可以通过主从切换继续提供服务。
    • 这种方式在可靠性和性能之间找到了平衡。
  2. 提升性能

    • 如果要求同步到所有从节点,主节点需要等待所有从节点完成同步,可能显著增加消息发送的延迟。
    • 同步到一个从节点即可显著降低延迟。
  3. 分布式一致性

    • RocketMQ 采用的是 主从复制架构,而非分布式共识协议(如 Raft)。因此,默认只需同步到一个从节点即可满足实际需求。

3. 可调整策略

RocketMQ 的主从同步行为可以通过配置项进行调整。如果需要更高的可靠性,可以使用自定义实现或调整同步逻辑:

  1. SYNC_MASTER 模式

    • 默认同步到一个从节点。
    • 不会等待所有从节点完成同步。
  2. 强一致性需求

    • 如果需要所有从节点同步完成,可以通过修改源码或自定义逻辑实现。
  3. 异步模式(ASYNC_MASTER)

    • 主节点不等待从节点同步完成,直接返回生产者发送成功,提升吞吐量,但会降低可靠性。

4. 总结

在 RocketMQ 默认的 SYNC_MASTER 模式下,主节点需要 同步到至少一个从节点 后,才返回发送成功。

这种策略在可靠性和性能之间找到了良好的平衡:

  1. 同步到一个从节点:保证主节点崩溃时,至少一个从节点有完整的数据。
  2. 不要求同步所有从节点:避免增加消息发送的延迟。

如果对一致性有更高要求,可以通过自定义实现强制同步到所有从节点,但需权衡性能影响。

相关推荐
非优秀程序员10 分钟前
10 个最佳开源 ChatGPT 替代方案,100% 本地运行
前端·人工智能·后端
天天摸鱼的java工程师11 分钟前
如何设计一个用户签到系统,支持连续签到统计?
java·后端
考虑考虑20 分钟前
数据库唯一索引
数据库·后端·mysql
非优秀程序员25 分钟前
深度测评!尝试 100 多个 MCP 服务器后,挑出的最有价值 10 个 MCP【Cursor】
人工智能·后端·开源
海海不掉头发30 分钟前
【2025 年】软件体系结构考试试卷-期末考试
java·服务器·软件体系结构
智_永无止境42 分钟前
集合的处理:JDK和Guava孰强孰弱?
java·jdk·集合·guava
matdodo1 小时前
【大数据】java API 进行集群间distCP 报错unresolvedAddressException
java·大数据·开发语言
Java技术小馆1 小时前
利用DeepWiki高效阅读项目源码
java·后端·面试
int型码农1 小时前
数据结构第八章(六)-置换选择排序和最佳归并树
java·c语言·数据结构·算法·排序算法
PetterHillWater1 小时前
电商行业商品标题分词实践
后端