python批量删除redis key

生产环境中要禁止使用keys *查询key, 因为redis低版本是单线程,如果key非常多的话,直接使用keys *会导致阻塞,所以应当使用scan命令,scan命令介绍请参考其他文档。

python 复制代码
# -*- coding: utf-8 -*-
# @Time    : 2025/01/09
# @Author  : 养乐多
# @Mail    : oct_hao@163.com
# @File    : redis_del_keys.py
# @Use     : 利用scan命令批量删除redis key


import redis


class Redis:
    def __init__(self, host, port, db=0):
        '''
        初始化redis连接
        :param host: redis host
        :param port: redis port
        :param db: redis db
        '''
        self.redis_host = host
        self.redis_port = port
        self.redis_db = db
        try:
            # 连接redis
            self.redis_client = self._connect()
        except Exception as e:
            print('redis连接失败', e)

    def _connect(self):
        '''
        连接redis
        '''
        return redis.StrictRedis(host=self.redis_host, port=self.redis_port, db=self.redis_db)

    def _close(self):
        '''
        关闭redis连接
        '''
        self.redis_client.close()

    def batch_delete_keys(self, pattern, batch_size=1000):
        """
        使用 SCAN 命令批量删除匹配给定模式的 Redis 键
        :param pattern: 要删除的键的模式
        :param batch_size: 每次扫描时的键的批量大小
        """
        # 初始化游标
        cursor = 0 

        while True:
            # 使用 SCAN 命令遍历键
            cursor, keys = self.redis_client.scan(cursor=cursor, match=pattern, count=batch_size)
            # 删除匹配的键
            if keys:
                self.redis_client.delete(*keys)
                print('删除了%s个key' % len(keys))
            else:
                break

            if cursor == 0:
                break

        self._close()
    
    def get_all_key_count(self, pattern, batch_size=1000):
        '''
        使用 SCAN 命令批量删除匹配给定模式的 Redis 键
        :param pattern: 要删除的键的模式
        :param batch_size: 每次扫描时的键的批量大小
        '''
        # 初始化游标
        cursor = 0
        # 初始化计数器
        count = 0  

        while True:
            # 使用 SCAN 命令遍历键
            cursor, keys = self.redis_client.scan(cursor=cursor, match=pattern, count=batch_size)
            # 统计匹配的键的数量
            if keys:
                count += len(keys)
            else:
                break

            if cursor == 0:
                break

        self._close()
        return count

if __name__ == "__main__":
    redis_host = '172.30.11.132'
    redis_port = 6379
    redis_db = 0
    pattern = '*123'
    batch_size = 1000

    # 连接到 Redis
    r = Redis(redis_host, redis_port, redis_db)
    # 查询key总数
    print(r.get_all_key_count(pattern=pattern, batch_size=batch_size))
    # 删除key
    # r.batch_delete_keys(pattern=pattern, batch_size=batch_size)
相关推荐
孟健16 小时前
Karpathy 用 200 行纯 Python 从零实现 GPT:代码逐行解析
python
码路飞18 小时前
写了个 AI 聊天页面,被 5 种流式格式折腾了一整天 😭
javascript·python
曲幽20 小时前
FastAPI压力测试实战:Locust模拟真实用户并发及优化建议
python·fastapi·web·locust·asyncio·test·uvicorn·workers
敏编程1 天前
一天一个Python库:jsonschema - JSON 数据验证利器
python
前端付豪1 天前
LangChain记忆:通过Memory记住上次的对话细节
人工智能·python·langchain
databook1 天前
ManimCE v0.20.1 发布:LaTeX 渲染修复与动画稳定性提升
python·动效
花酒锄作田2 天前
使用 pkgutil 实现动态插件系统
python
前端付豪2 天前
LangChain链 写一篇完美推文?用SequencialChain链接不同的组件
人工智能·python·langchain
曲幽2 天前
FastAPI实战:打造本地文生图接口,ollama+diffusers让AI绘画更听话
python·fastapi·web·cors·diffusers·lcm·ollama·dreamshaper8·txt2img
老赵全栈实战2 天前
Pydantic配置管理最佳实践(一)
python