MySQL 大表查询优化、超大分页处理、SQL 慢查询优化、主键选择

1. 大表数据查询优化

1.1 建立合适的索引

  • 单列索引:针对查询条件的字段建立索引。
  • 联合索引 :针对多条件查询建立复合索引(注意索引的最左匹配原则)。
  • 覆盖索引:查询字段全部在索引中,避免回表。
sql 复制代码
CREATE INDEX idx_status_created ON orders(status, created_at);

**1.2 避免 SELECT ***

  • 只查询需要的字段,减少数据传输量。
sql 复制代码
SELECT id, name FROM users WHERE status = 'active';

1.3 分区 / 分表

  • 分区表:按时间或范围分区,减少单次扫描数据量。
  • 分表:按业务规则拆分成多个表,降低单表数据量。

1.4 读写分离

  • 主库负责写,多个从库负责读,缓解查询压力。

1.5 缓存

  • 使用 Redis / Memcached 缓存热点数据,减少数据库访问。

2. 超大分页处理

问题

LIMIT offset, size 在 offset 很大时会扫描大量数据,性能很差。


优化方案 1:基于索引的"延迟关联"

sql 复制代码
SELECT u.* FROM users u JOIN ( SELECT id FROM users WHERE status = 'active' ORDER BY id LIMIT 100000, 20 ) t ON u.id = t.id;

原理:先用索引快速定位 ID,再回表取数据。


优化方案 2:基于主键的"游标分页"

sql 复制代码
SELECT * FROM users WHERE id > 100000 ORDER BY id LIMIT 20;

原理:记录上一次的最大 ID,下次直接从该 ID 往后查,避免扫描前面的数据。


优化方案 3:禁止深度分页

  • 对超过一定页数的查询,提示用户缩小范围或使用条件过滤。

3. SQL 查询慢的优化思路

3.1 使用 EXPLAIN 分析执行计划

sql 复制代码
EXPLAIN SELECT * FROM orders WHERE status = 'pending';

重点关注:

  • type (访问类型,越接近 const 越好)
  • key(使用的索引)
  • rows(扫描行数)

3.2 避免函数操作索引列

sql 复制代码
-- 慢
WHERE DATE(created_at) = '2025-10-25'
-- 快
WHERE created_at >= '2025-10-25' AND created_at < '2025-10-26'

3.3 避免 OR 导致索引失效

sql 复制代码
-- 慢
WHERE status = 'active' OR type = 'vip'
-- 快(拆成两次查询或用 UNION)
SELECT ... WHERE status = 'active' UNION ALL SELECT ... WHERE type = 'vip';

3.4 适当使用覆盖索引

sql 复制代码
CREATE INDEX idx_status_id ON orders(status, id);
SELECT id FROM orders WHERE status = 'pending';

4. 主键选择:自增 ID vs UUID

对比项 自增 ID UUID
存储空间 小(4~8字节) 大(16字节)
索引性能 高(顺序插入) 低(随机插入,索引碎片多)
可读性 简单递增 不可读
分布式唯一性 需额外方案(如雪花算法) 天然唯一
安全性 可推测数据量 不易推测

建议

  • 单库单表 → 用自增 ID(性能好)
  • 分布式、多节点写入 → 用雪花算法(Snowflake)或优化版 UUID(如 UUIDv7,时间有序)
  • 不建议直接用随机 UUID 作为主键(索引性能差)

5. 总结优化策略

场景 优化方法
大表查询 索引优化、分区分表、缓存、读写分离
超大分页 延迟关联、游标分页、限制深度分页
SQL 慢查询 EXPLAIN 分析、避免函数操作索引列、避免 OR、覆盖索引
主键选择 单库用自增 ID,分布式用雪花算法或有序 UUID
相关推荐
cui_ruicheng3 小时前
MySQL(四):数据类型与字段设计
数据库·mysql
皮皮学姐分享-ppx4 小时前
政府绿色采购数据库(2015-2024.3)
大数据·网络·数据库·人工智能·制造
闪电悠米6 小时前
黑马点评-Redis 消息队列-03_stream_consumer_group
开发语言·数据库·redis·分布式·缓存·junit·lua
DIY源码阁6 小时前
JavaSwing航班订票管理系统 - MySQL版
数据库·mysql
浪客灿心7 小时前
项目篇:模块设计与实现
数据库·c++
流星白龙9 小时前
【MySQL高阶】26.事务(1)
数据库·mysql
三十..10 小时前
Redis 核心原理与高可用架构实践
运维·数据库·redis
这个DBA有点耶10 小时前
索引优化深潜(下):索引合并、ICP 与索引设计的实战法则
数据库·mysql·架构
用户30745969820710 小时前
EXPLAIN 执行计划 完全精通指南
mysql
努力努力再努力wz10 小时前
【内存管理与高并发内存池系列】从 mmap 到 malloc:文件映射、匿名映射与 glibc 内存分配机制详解
linux·c语言·数据结构·数据库·c++·qt·链表