分布式:浅谈幂等

幂等(idempotent、idempotence)是一个数学与计算机学概念,常见于抽象代数中。

在编程中,一个幂等操作的特点是其任意多次执行所产生的影响均与一次执行的影响相同。幂等函数,或幂等方法,是指可以使用相同参数重复执行,并能获得相同结果的函数。这些函数不会影响系统状态,也不用担心重复执行会对系统造成改变。例如,"getUsername()和 setTrue()"函数就是一个幂等函数。简言之:幂等就是一个操作,不论执行多少次,产生的效果和返回的结果都是一样的。

一、幂等有哪些技术解决方案

1、查询操作

查询一次和查询多次,在数据不变的情况下,查询结果是一样的。select 是天然的幂等操作。

2、删除操作

删除操作也是幂等的,删除一次和多次删除都是把数据删除。注意:可能返回结果不一样,删除的数据不存在,返回 0,删除的数据多条,返回结果多个。

3、唯一索引

防止新增脏数据。比如:支付宝的资金账户,支付宝也有用户账户,每个用户只能有一个资金账户,怎么防止给用户创建多个资金账户,那么给资金账户表中的用户 ID 加唯一索引,所以一个用户新增成功一个资金账户记录。

要点:唯一索引或唯一组合索引来防止新增数据存在脏数据(当表存在唯一索引,并发时新增报错时,再查询一次就可以了,数据应该已经存在了,返回结果即可。

4、token 机制

防止页面重复提交。

业务要求:页面的数据只能被点击提交一次;

发生原因:由于重复点击或者网络重发,或者 nginx 重发等情况会导致数据被重复提交;

解决办法:

(1)集群环境,采用 token 加 redis(redis 单线程的,处理需要排队);

(2)单JVM环境,采用 token 加redis或token加 jvm 锁。

处理流程:

(1)提交前,向服务申请 token,token 放到 redis 或 jvm 内存,token设置有效时间;

(2)提交后,后台校验 token,同时删除 token,生成新的 token 返回。

token 特点:要申请,一次有效性,可以限流。

注意:redis 要用删除操作来判断 token,删除成功代表 token 校验通过。

5、 TraceId

操作时TraceId是唯一的。

二、对外提供的API如何保证幂等

举例说明: 银联提供的付款接口,为了支持幂等调用,需要接入商户提交付款请求时附带source 来源,seq 序列号。source+seq 在数据库里面做做联合唯一索引,这样当第三方调用时,先在本方系统里面查询一下,是否已经处理过,返回相应处理结果;没有处理过,进行相应处理,返回结果。

注意,为了幂等友好,一定要先查询一下,是否处理过该笔业务,不查询直接插入业务系统,会报错,因为实际已经处理。

相关推荐
轻刀快马2 小时前
穿透 MQ 专栏 (五):【终局之战】MySQL 和 MQ 的世纪联姻:扒开“分布式事务”的遮羞布
数据库·分布式·消息队列
列星随旋5 小时前
Kafka基础篇
分布式·kafka
Jackyzhe5 小时前
从零学习Kafka:生产者压缩
分布式·学习·kafka
一只普通的码农6 小时前
kafka在windows环境部署
分布式·kafka
Kiyra7 小时前
异步任务不用 Kafka 也行:用 Redis Stream 搭一套轻量级 Producer/Consumer 框架
数据库·人工智能·redis·分布式·后端·缓存·kafka
老码观察8 小时前
分布式系统核心理论与实践:从CAP到工程落地
分布式
赵渝强老师9 小时前
【赵渝强老师】Hadoop的伪分布部署模式
大数据·hadoop·分布式
Mike117.9 小时前
GBase 8c 序列取值在分布式业务里的几个风险点
分布式
淡定一生23339 小时前
spark 3.3+ 之BloomFilter Runtime Filter
大数据·分布式·spark
霑潇雨9 小时前
原生 Zookeeper 实现分布式锁案例
java·分布式·zookeeper·云原生·maven