RocketMQ发送消息默认是什么策略,主同步成功了就算成功了?异步写?还是要大部分从都同步了?

文章内容收录到个人网站,方便阅读:hardyfish.top/

资料分享

RocketMQ技术内幕:

RocketMQ 默认的主从同步模式是同步到至少一个从节点后返回发送成功,并不是要求同步到所有从节点或大多数从节点。

以下是详细解释:

1. 默认主从同步规则

1.1 同步到一个从节点

  • SYNC_MASTER 模式下,主节点在消息写入磁盘(同步刷盘)后,会将消息同步到 至少一个从节点
  • 只有主节点确认消息已经成功同步到某个从节点后,才会返回给生产者发送成功。

1.2 不同步所有从节点

  • 默认情况下,RocketMQ 并不会强制要求同步到所有从节点,原因是:

    • 同步到所有从节点会增加延迟。
    • 可能会因为网络或从节点的故障,导致消息发送失败的概率增加。

2. 为什么只需要同步到一个从节点

  1. 数据可靠性保障

    • 同步到至少一个从节点后,即使主节点崩溃,从节点也可以通过主从切换继续提供服务。
    • 这种方式在可靠性和性能之间找到了平衡。
  2. 提升性能

    • 如果要求同步到所有从节点,主节点需要等待所有从节点完成同步,可能显著增加消息发送的延迟。
    • 同步到一个从节点即可显著降低延迟。
  3. 分布式一致性

    • RocketMQ 采用的是 主从复制架构,而非分布式共识协议(如 Raft)。因此,默认只需同步到一个从节点即可满足实际需求。

3. 可调整策略

RocketMQ 的主从同步行为可以通过配置项进行调整。如果需要更高的可靠性,可以使用自定义实现或调整同步逻辑:

  1. SYNC_MASTER 模式

    • 默认同步到一个从节点。
    • 不会等待所有从节点完成同步。
  2. 强一致性需求

    • 如果需要所有从节点同步完成,可以通过修改源码或自定义逻辑实现。
  3. 异步模式(ASYNC_MASTER)

    • 主节点不等待从节点同步完成,直接返回生产者发送成功,提升吞吐量,但会降低可靠性。

4. 总结

在 RocketMQ 默认的 SYNC_MASTER 模式下,主节点需要 同步到至少一个从节点 后,才返回发送成功。

这种策略在可靠性和性能之间找到了良好的平衡:

  1. 同步到一个从节点:保证主节点崩溃时,至少一个从节点有完整的数据。
  2. 不要求同步所有从节点:避免增加消息发送的延迟。

如果对一致性有更高要求,可以通过自定义实现强制同步到所有从节点,但需权衡性能影响。

相关推荐
_一条咸鱼_2 分钟前
LangChain输出解析器的作用与类型解析(17)
人工智能·面试·langchain
到账一个亿2 分钟前
代码的隐形守护者:Spring AOP 是如何做到的?
后端
SparkX开源AI知识库3 分钟前
SparkX开源AI知识库系统V1.0.0发布
后端
_一条咸鱼_4 分钟前
Android Runtime内存共享与访问控制原理剖析(71)
android·面试·android jetpack
知其然亦知其所以然10 分钟前
Java 面试高频题:GC 到底回收了什么、怎么回收、啥时候回收?
java·后端·面试
Z_W_H_11 分钟前
【SpringBoot】 整合MyBatis+Postgresql
java·spring boot·后端
nbsaas-boot19 分钟前
多租户架构下的多线程处理实践指南
java·开发语言·spring
倔强青铜三21 分钟前
苦练Python第7天:布尔七日斩
人工智能·python·面试
lihainuo22 分钟前
Next.js + AI-SDK 实战:模型注册表从类型设计到工具调用全解析
后端·node.js
倔强青铜三26 分钟前
苦练Python第6天:数字魔法全解
人工智能·python·面试