主从架构锁丢失问题-----RedLock

RedLock是Redis作者Antirez提出的分布式锁 算法 ,专门解决主从架构下锁丢失的问题。

单机Redis做分布式锁有单点故障风险。主从架构也不保险:客户端在主节点加锁成功,主节点还没把锁数据同步到从节点就挂了,从节点晋升为新主节点,锁数据压根没同步过来。这时候另一个客户端来加锁,也能成功,两个客户端同时拿到锁,数据就乱了。

Redlock的思路是用多个独立的Redis实例 投票 ,只有拿到大多数节点的锁才算加锁成功。即使部分节点故障,锁的安全性依然有保障。

RedLock实现原理:

部署5个独立的Redis实例,注意是完全独立的,不需要主从复制,不需要哨兵,也不是Redis Cluster,5个实例之间没有任何数据同步。

加锁流程:

1,客户端记录当前时间戳t1

2,依次向5个Redis实例发送SET lock_key uuid EX 30 NX命令

3,每个请求设置较短的超时时间,比如5-50ms,某个实例超时就跳过。

4,统计成功加锁的实例数量

5,获取当前时间戳t2,计算加锁总耗时t

6,如果成功数量 >= 3且 t < 锁的过期时间,加锁成功。

7,否则向所有实例发送解锁请求

解锁流程:

向所有5个实例发送DEL命令,不管之前是否加锁成功

加锁和解锁命令跟普通Redis分布式锁一样,都是SET EX NX 加锁,Lua脚本解锁。

RedLock一定安全吗?

答:不一定。Martin Kleppmann对RedLock提出过质疑:

可能不安全场景:

1)客户端1拿到Redlock

2)客户端1发生长时间GC,进程被暂停

3)GC期间锁过期了

4)客户端2趁机拿到锁

5)GC结束,客户端1不知道锁已经过期,继续执行业务

6)两个客户端同时操作临界资源

除了GC,时钟跳变也是隐患。Redlock依赖各节点的系统时间来计算锁的有效期,如果某个节点的时钟突然往前跳了,锁就会提前过期。

Antirez 回应说可以用 fencing token机制来解决,但 Redis 本身并不支持fencing token,需要业务端自己实现。

生产环境的选择:

Redlock的实现成本不低:

  1. 需要部署至少5个独立实例,资源开销大

  2. 加锁要依次访问多个节点,延迟比单机高

3)极端情况下还是有问题

所以大多数业务场景还是用主从+哨兵的方案,配合Redisson的看门狗续期。只有对锁的可靠性要求极高的场景才考虑Redlock,比如金融交易、库存扣减。

如果确实需要强一致性的分布式锁,可以考虑ZooKeeper 或者etcd,它们基于Paxos/Raft共识算法,一致性保证比Redis更强。

提问:

1,提问: Redlock为什么推荐部署5个实例而不是3个?

回答:5个实例允许最多2个节点故障还能正常工作,容错能力更强。3个实例只允许1个故障,风险太大。而且5个是奇数,投票时不会出现平票的情况。实例数再多性能就太差了,5个是性能和可靠性的平衡点。

2,提问:如果Redlock加锁成功了,但执行到一半有个Redis实例重启了,会有什么问题?

回答:要看这个实例是否开启了AOF持久化。如果没开,重启后锁数据丢失,其他客户端可能在这个实例上加锁成功,配合其他实例可能凑够大多数票。所以用 Redlock 的实例必须开启AOF并且设置fsync=always,保证每次写入都落盘。代价是性能会下降。

3,提问:Martin Kleppmann提到的 fencing token是什么?怎么实现?

回答:fencingtoken是一个单调递增的序列号,每次加锁成功时分配一个token。客户端操作共享资源时带上token,资源端只接受token大于等于上次见过的最大值的请求。这样即使老客户端的锁过期了还在执行,它的token比新客户端小,请求会被拒绝。实现需要存储端支持版本比较,比如数据库的乐观锁、ZooKeeper的版本号。

4,提问:ZooKeeper 和 Redis 做分布式锁各有什么优劣?

回答:ZooKeeper用临时顺序节点实现,基于ZAB协议保证一致性,可靠性比Redis高,客户端宕机会话断开锁自动释放不需要考虑续期。缺点是性能比Redis差一个数量级,QPS大概几千,Redis能到十万级。Redis性能好但一致性弱,适合大多数互联网场景。金融、交易这种对一致性要求极高的场景用ZooKeeper更稳。

相关推荐
孟健10 小时前
LLM API 安全防线:从 OpenCode 盗刷事件到 LiteLLM 多模型容灾实操
人工智能·后端·架构
smallyoung11 小时前
告别N+1:Spring Boot 一键数据翻译框架体系
java·后端·架构
第404号工位12 小时前
40块钱二手瘦客户端,如何跑满家庭物联网中枢?(拒绝Docker爆盘实录)
linux·架构·node.js
Thneonl13 小时前
你写的 NetworkPolicy 可能一条都没生效
后端·架构
96245614 小时前
Go EVM 链上数据平台实践:从 RPC Demo 到可演进架构
rpc·架构·golang
考拉讲支付15 小时前
母婴亲子服务平台分账架构设计:多场景多方分账与合规清结算实践
大数据·运维·人工智能·微信小程序·架构·微信公众平台
黄俊懿15 小时前
【架构师从入门到进阶】第六章:服务集群优化——第八节:线程数公式
java·服务器·数据库·分布式·性能优化·架构·系统架构
行者全栈架构师15 小时前
【鸿蒙心迹】互动卡片全链路——把核心功能放到桌面(FormKit 实战)(HarmonyOS 7.x)
前端·算法·架构
海带紫菜菠萝汤15 小时前
PostgreSQL 19 延期一个月:AI 把找 bug 变便宜了,修 bug 还是人工价
人工智能·ai·程序员·架构·大模型
Thneonl15 小时前
主从延迟 0 秒的谎言:SBM 的三个盲区
后端·架构