RabbitMQ 幂等性

1. 什么是幂等性

幂等性,即某个操作,多次执行,对系统的影响是相同的。

如 i++,每一次调用,i 都会加 1,i 的值是不断变化的,就不是幂等的。

如数据库的 select 操作,无论执行多少次,系统中的数据都不会发生变化,就是幂等的。

在我们进行网购时,有可能一个订单会被多次发送给支付系统,那么就需要保证只扣一次费,也就需要保证系统的幂等性。

2. 幂等性的划分

一般消息中间件的消息传输保障分为:

  • At most once:最多一次,消息可能会丢失,但不会重复传输
  • At least once:最少一次,消息不会丢失,但可能会重复传输
  • Exactil once:恰好一次,每条消息仅会被传输一次

RabbitMQ 支持 At most once 和 At least once。恰好一次的实现难度较大,难以做到。

最多一次,可能会由于网络原因,导致消息丢失,在开发场景中一般不使用;

最少一次,可能会造成消息的重复接收,于是就需要针对重复收到的消息进行处理。

3. 可能会引发消息重复传输的场景

  • 当生产者给 MQ 发送消息时,MQ 已经收到消息并且返回了 ack,但由于网络等原因,生产者没有收到 ack,那么此时生产者就会再次向 MQ 发送该条消息,就造成了 MQ 收到了两条重复的消息。
  • 当 MQ 给消费者发送消息时,消费者已经成功处理了消息并返回了 ack,但由于网络等原因,MQ 没有收到 ack,于是 MQ 就会再次给消费者发送该条消息,就造成了消费者收到两条重复的消息。

4. 如何解决消息重复接收

4.1 全局唯一 ID(主要)

为每一条消息都分配一个唯一的 ID,这样消费者接收到消息时,会先判断该消息是否已经消费过了,若已经被消费,就会直接丢弃;若没有被消费,就会进行消费,并将 ID 存入 Redis(包括但不限于 Redis) 中。

这样消费者就可以根据 Redis 中是否存有接收到的消息的 ID 来判断该消息是否存储过。

4.2 业务逻辑判断

通过检查数据库中是否存在相关数据记录等操作,确保收到的消息没有执行过,然后才会进行处理。

相关推荐
睡不醒男孩03082335 分钟前
第三篇:打破云厂商锁定:基于CLup构建私有化PolarDB分布式集群高可用方案
分布式·clup·中启乘数
前端不太难1 小时前
鸿蒙 App 分布式数据同步:架构设计 + Demo 实现
分布式·状态模式·harmonyos
水木流年追梦2 小时前
大模型入门-大模型优化方法13- MTP 多 token 输出、DCA 双块注意力
人工智能·分布式·算法·正则表达式·prompt
Francek Chen3 小时前
【大数据处理与分析】MapReduce:05 MapReduce的具体应用
大数据·hadoop·分布式·mapreduce
我是一颗柠檬4 小时前
【Java项目技术亮点】分布式锁实现与优化:从Redisson到ZooKeeper,彻底搞懂分布式锁的底层原理
java·redis·分布式·中间件·java-zookeeper
moonsims6 小时前
基于Lattice Mesh的AI 的分布式共识与动态任务分配架构的无人机群“去中心化无声协同”技术和极低带宽下的韧性通信技术
人工智能·分布式·架构
一个骇客7 小时前
批处理模型详解:从 MapReduce 到数据流引擎
分布式·架构
todoitbo7 小时前
Agent_Swarm_分布式协作的通信编排与节点发现机制分析
人工智能·分布式·ai·jiuwenswarm
Ze3G90nYt8 小时前
Redis 分布式锁进阶第一百二十篇
数据库·redis·分布式
段一凡-华北理工大学8 小时前
工业领域的Hadoop架构学习~系列文章19:能源行业Hadoop应用实践
大数据·人工智能·hadoop·分布式·学习·架构·高炉炼铁