redis bigKey问题

bigKey的产生

1、使用String存储了大文件的二进制。

2、使用集合没有考虑到数据的规模,或者规模的增长。

3、哈希中冗余了大量键值对。

bigKey问题

1、操作大key时会阻塞线程:redis是单线程。

2、网络阻塞:在网络中占用大量网络流量。

3、阻塞工作线程:其他命令不能正常执行。

如何查看?

1、使用自带的--bigkeys,但是会影响主线程。

2、使用自带的scan命令。

3、使用开源工具redis-rdb-tools等分析RDB文件。

如何处理?

1、分割:将一个大的key分成多个小key。

2、手动清理:redis4.0之后使用unlink 启动异步线程去清理一个或多个指定key。

3、采用合适的数据结构。

相关推荐
曹天骄3 小时前
基于 Cloudflare Worker 构建分布式测速调度系统:KV 与 D1 数据层设计实战教程
分布式·缓存
三水不滴3 小时前
Redis 持久化机制
数据库·经验分享·redis·笔记·缓存·性能优化
lusasky4 小时前
Claude Code v2.1.0+ 版本集成LSP
大数据·数据库·人工智能
挺6的还4 小时前
16.哨兵(sentinel)
redis
凯子坚持 c4 小时前
Qt常用控件指南(7)
服务器·数据库·qt
diediedei4 小时前
Python字典与集合:高效数据管理的艺术
jvm·数据库·python
气可鼓不可泄4 小时前
将dmpython 封装在容器镜像里
数据库·python
m0_561359674 小时前
超越Python:下一步该学什么编程语言?
jvm·数据库·python
mango_mangojuice4 小时前
Linux学习笔记 1.19
linux·服务器·数据库·笔记·学习
TGITCIC5 小时前
丢掉向量数据库!推理型 RAG 正在重新定义长文档问答的准确边界
数据库·ai大模型·推理·ai搜索·大模型ai·rag增强检索·ai检索