数据一致性问题的相关案例及解决方案

项目场景:

简述项目相关背景:

调用外部系统的一个接口,这个接口是更新单据状态的接口。现在外部这个接口执行需要一定时间,我调用了这个接口之后,立马异步查询这个单据的状态。最终导致状态不一致的问题


问题描述

这个问题属于并发控制数据一致性问题。具体来说,当你调用外部接口更新单据状态后,立即发起异步查询,由于网络延迟接口处理时间以及数据库的ACID特性(特别是隔离性),你可能会观察到不一致的结果。这种情况在分布式系统中很常见。


原因分析:

提示:这里填写问题的分析:

外部系统架构可能采用消息队列的方式,或者外部系统吞吐量较大,导致接口响应慢。


解决方案:

从目标出发,从数据一致性原则出发,主要有两种解决方案:

1、强一致性:同步(但是不行,如果外部系统采用消息队列异步的情况。获取的返回结果没有参考意义)

2、最终一致性:还是采取异步的方式。但是需要添加补足策略保证数据状态的最终一致性。

下面是一些保证最终一致性的补足策略方式:

1、延迟查询:

可以设定一个合理的延时(例如使用delay或sleep函数)后再发起查询,给外部系统足够的时间去完成状态更新。
2、幂等性设计:(强一致性方案)

使接口幂等,即多次调用同一个接口,结果始终相同。这样即使查询早于更新完成,再次查询也会得到正确的结果。
3、使用事务和两阶段提交(2PC):

如果外部系统支持,可以使用两阶段提交协议来确保更新和查询都在一个事务内完成,保证数据一致性。
4、回查机制:

不立即查询状态,而是约定一个时间点或者在用户触发特定操作时再进行状态查询,如果查询结果不一致,可以设定一个回查机制,定时重试查询直到状态正确。
5、版本号或乐观锁:(当前情景不适用)

给单据添加一个版本号字段,每次更新时检查当前版本号是否与预期一致,如果不一致则表示有其他更新操作,需要重新尝试。
6、补偿操作:

如果查询到的状态不正确,可以设计补偿操作,比如记录不一致情况,然后通过后台任务来修正。
7、异步确认:

外部系统在完成状态更新后,通过回调或消息队列通知你的系统,确保在接收到确认后再进行后续操作。

选择择哪种方法取决于系统架构、性能要求和外部系统的特性。通常,结合业务场景和系统设计,可以采取一种或多种策略来确保数据一致性。所以,从当前系统架构时间成本技术成本出发选择回查机制实现数据的最终一致性。

相关推荐
二哈赛车手几秒前
新人笔记---实现简易版的rag的bm25检索(利用ES),以及RAG上传时的ES与向量数据库双写
java·数据库·笔记·spring·elasticsearch·ai
winner88814 分钟前
从零吃透C++命名空间、std、#include、string、vector
java·开发语言·c++
AI人工智能+电脑小能手12 分钟前
【大白话说Java面试题】【Java基础篇】第26题:Java的抽象类和接口有哪些区别
java·开发语言·面试
AIMath~15 分钟前
雪花算法+ZooKeeper解决方案+RPC是什么
分布式·zookeeper·云原生
KmSH8umpK21 分钟前
Redis分布式锁从原生手写到Redisson高阶落地,附线上死锁复盘优化方案进阶第六篇
数据库·redis·分布式
bzmK1DTbd21 分钟前
SOLID原则在Java中的实践:单一职责与开闭原则
java·开发语言·开闭原则
winner888126 分钟前
C++ 命名空间、虚函数、抽象类、protected 权限全套通俗易懂精讲(附与 Java 对比)
java·开发语言·c++
直奔標竿36 分钟前
Java开发者AI转型第二十五课!Spring AI 个人知识库实战(四)——RAG来源追溯落地,拒绝AI幻觉
java·开发语言·人工智能·spring boot·后端·spring
qq_589568101 小时前
java基础学习,案例练习,即时通讯
java·开发语言·学习
逸Y 仙X1 小时前
文章十九: ElasticSearch Full Text 全文本查询
java·大数据·数据库·elasticsearch·搜索引擎·全文检索