redis bigKey问题

bigKey的产生

1、使用String存储了大文件的二进制。

2、使用集合没有考虑到数据的规模,或者规模的增长。

3、哈希中冗余了大量键值对。

bigKey问题

1、操作大key时会阻塞线程:redis是单线程。

2、网络阻塞:在网络中占用大量网络流量。

3、阻塞工作线程:其他命令不能正常执行。

如何查看?

1、使用自带的--bigkeys,但是会影响主线程。

2、使用自带的scan命令。

3、使用开源工具redis-rdb-tools等分析RDB文件。

如何处理?

1、分割:将一个大的key分成多个小key。

2、手动清理:redis4.0之后使用unlink 启动异步线程去清理一个或多个指定key。

3、采用合适的数据结构。

相关推荐
陈天伟教授几秒前
数据库技术发展趋势- 04.大数据技术
数据库·人工智能·数据挖掘
山峰哥10 分钟前
SQL调优实战指南:从索引设计到高并发场景优化全链路解析
大数据·汇编·数据库·sql·编辑器·区块链
zbguolei11 分钟前
上传 Excel 文件进行数据库比对
数据库·excel
+VX:Fegn089516 分钟前
计算机毕业设计|基于springboot + vue在线教育学习系统(源码+数据库+文档)
java·数据库·vue.js·spring boot·学习·课程设计
KG_LLM图谱增强大模型18 分钟前
企业级实用本体论及构建指南系列(1/4):Palantir 数据建模的哲学与实践
数据库·oracle·palantir
记得开心一点嘛34 分钟前
使用ShardingSphere进行分库分表
数据库·mysql
CrazyClaz38 分钟前
NewSQL数据库TiDB
数据库·tidb
lambo mercy1 小时前
python入门
前端·数据库·python
IT技术分享社区1 小时前
从删库到恢复:MySQL Binlog实战手册
数据库·mysql·程序员
小李云雾2 小时前
Python 多任务编程入门:进程的创建、同步与进程池使用
开发语言·数据库·python·oracle