Redis 批量删除键

Redis 批量删除键

1. 简介

在Redis中批量优雅的删除大量键是一个很麻烦的问题,下面例举常用的方法和优缺点。

2. keys+del命令

使用keys使用查找所有匹配的键,然后在使用del一起批量删除。

优点

  1. 操作简单。

缺点

  1. 查找性能特别差,需要遍历所有键。如果redis key特别多,还有可能造成redis短时间无法提供服务。
  2. 网络性能占用多,所有匹配键都需要发送到redis客户端,如果匹配键特别多会占用大量网络带宽(这个问题可以通过Lua脚本来解决)。
  3. 占用内存多,需要大量内存暂存已经找到的键。
py 复制代码
import redis

r = redis.Redis(host='127.0.0.1', port=6379, db=0)

# 查找
keys = r.keys("example-*")
# 删除
r.delete(*keys)

3. SCAN命令

  1. 使用SCAN命令迭代匹配特定模式的键。
  2. 对于每次SCAN迭代返回的键,使用DEL命令进行删除。
  3. 重复上述步骤,直到SCAN命令返回的游标为0,表示迭代完成。

优点

  1. 非阻塞,不会影响Redis服务器的其他操作。
  2. 可以控制每次迭代的键数量,减少内存占用。

缺点

  1. 在高并发场景下,很难保证所有匹配的键都完全删除,需要多次迭代。
py 复制代码
import redis

r = redis.Redis(host='127.0.0.1', port=6379, db=0)

cursor = 0  # 以0开始
while True:
    cursor, keys = r.scan(cursor=cursor, match='example-*', count=100)
    if cursor == 0:  # 以0结束
        break

    if keys:
        r.delete(*keys)

4. UNLINK命令

UNLINK命令是Redis提供的一个异步删除命令,与DEL命令不同,UNLINK命令会立即返回,而删除操作将在后台异步进行。

  1. 使用SCAN命令或KEYS命令获取要删除的键列表。
  2. 使用UNLINK命令代替DEL命令进行删除。

优点

  1. 异步删除,不会阻塞Redis服务器。

缺点

  1. 删除的完成时间不可预测。
  2. 在某些情况下可能需要额外的逻辑,保证在需要删除的键已经删除。
py 复制代码
import redis

r = redis.Redis(host='127.0.0.1', port=6379, db=0)

cursor = 0  # 以0开始
while True:
    cursor, keys = r.scan(cursor=cursor, match='example-*', count=100)
    if cursor == 0:  # 以0结束
        break

    if keys:
        r.unlink(*keys)

5. Lua脚本

上面所有的示例都可以转换成Lua脚本版本,下面只演示其中一个。

优点

  1. 大量降低redis客户端与redis服务器的RTT时间。
  2. 大量节约了redis服务器的带宽。

缺点

  1. 提高操作的复杂。
py 复制代码
import redis

r = redis.Redis(host='127.0.0.1', port=6379, db=0)

lua_script = """
local key1 = KEYS[1]
local delete_count = 0
local delete_keys = redis.call('keys', key1)
if #delete_keys > 0 then
    delete_count = redis.call('del',unpack(delete_keys))
end

return delete_count
"""

# 注册脚本
script = r.register_script(lua_script)

# 执行
result = script(keys=['example-*'])
print(result)

6. 总结

  1. 尽量避免在生产环境使用keys :使用keys不可避免的会出现性能问题。
  2. 分批次删除 :不要一次删除防止redis服务端处理大量键进入阻塞状态。
相关推荐
五彩小白1 小时前
Redis的过期删除和内存淘汰机制
数据库·redis·缓存
Flynn Liang6 小时前
Java 序列化也能成为瓶颈:Jackson、Protobuf 与 Redis 序列化的生产实践
java·redis·性能优化·jackson·序列化·protobuf
我不会起名字3227 小时前
分布式 ID:雪花、号段与 Redis 自增的 3 个取舍
redis·雪花算法·分布式 id·号段
Flynn Liang8 小时前
多智能体协同不再复杂:Redis Stream 消费者组、幂等与故障恢复
数据库·人工智能·redis·缓存·ai agent·智能体
Flynn Liang1 天前
大模型成本优化:基于 Redis 的可验证语义缓存架构
人工智能·redis·缓存·架构·ai agent·智能体
SA-D1 天前
Redis 架构要点:性能、持久化、缓存故障与分布式锁的边界
redis·缓存·架构
苜蓿muxu1 天前
缓存三大问题:穿透、击穿、雪崩
数据库·redis
bksczm2 天前
Redis Cluster 分片集群详解:槽路由、故障判定与扩缩容
数据库·redis·分布式
未秃头的程序猿2 天前
RedisTemplate 序列化用错,线上多了 3 个 G 的隐形 key
redis·后端
开开心心就好2 天前
显示器关不掉怎么办,用小工具一键息屏
算法·智能手机·pdf·计算机外设·ocr·lua·1024程序员节