高并发场景数据与一致性的简单思考

前言

高并发场景下的数据交互流程复杂多样,但关键诉求我认为只有三个:数据正确性/一致性、存储成本、调用延时。

方案分析

方案一

由 C 端服务直接打到 DB 中,B 端/DB 的 QPS 与 C 端请求 1:1。同时整个链路会因为多一次 RPC 调用以及序列化反序列化的操作,加大延时。若下游还是使用的 JDK8 甚至会有长尾问题,TP999 不可接受。但优点是完全没有一致性问题。

方案二

加入两个组件:分布式缓存和消息队列,当 DB 数据变更时先推到消息队列,再由消息队列消费写入缓存。C 端服务直接访问缓存,但访问缓存也有一定网络延时(同 Set 能保证 10ms 内,异地 Set 需要几十 ms)。同时缓存存储相较方案一成本更高,数据也会有一致性问题。

方案三

通过一个定时任务将 DB 数据同步到本地缓存中,缓存数据与 DB 数据一致,但需要接受一定延时(秒级)。系统访问本地缓存无需调用远端,几乎零耗时。但存储瓶颈由内存决定,成本较高。

思考

方案 延时 存储成本 数据一致性
1 100ms,需要一次 RPC 请求,同时还有一次访问 DB 的时延。 低,全部落库,硬盘存储。 强,没有其他数据存储介入。
2 10ms~50ms,瓶颈在分布式内存。 中,分布式缓存一般使用三级缓存架构,有硬盘介入。 弱,通常需要额外的校验任务。
3 0.1ms 以内,直接请求内存。 高,仅支持单台服务器内存可以承载的数据量级。 强,但有一定延时,能保证最终一致性。

写在最后

上述三个方案有各自的优势场景,需要根据具体的业务情况进行选型。但能得出一个简单的结论:在高并发的C端场景下,数据流交互不存在银弹。

相关推荐
毕设源码-邱学长3 分钟前
【开题答辩全过程】以 基于SpringBoot的理工学院学术档案管理系统为例,包含答辩的问题和答案
java·spring boot·后端
shejizuopin7 分钟前
基于SSM的高校旧书交易系统的设计与实现(毕业论文)
java·mysql·毕业设计·论文·ssm·毕业论文·高校旧书交易系统的设计与实现
修己xj12 分钟前
SpringBoot解析.mdb文件实战指南
java·spring boot·后端
Guheyunyi24 分钟前
电气安全管理系统:筑牢现代用电安全的智能防线
大数据·人工智能·科技·安全·架构·能源
lpfasd12330 分钟前
Spring Boot 定时任务详解(从入门到实战)
spring boot·后端·python
咩图33 分钟前
Sketchup软件二次开发+Ruby+VisualStudioCode
java·前端·ruby
moxiaoran575334 分钟前
Go语言的文件操作
开发语言·后端·golang
我命由我1234537 分钟前
Android 开发问题:Duplicate class android.support.v4.app.INotificationSideChannel...
android·java·开发语言·java-ee·android studio·android-studio·android runtime
迎仔40 分钟前
06-Spark 进阶指南:架构原理与 Alluxio 加速
大数据·架构·spark
熬夜敲代码的小N42 分钟前
Unity大场景卡顿“急救包”:从诊断到落地的全栈优化方案
java·unity·游戏引擎