MySQL 大表查询优化、超大分页处理、SQL 慢查询优化、主键选择

1. 大表数据查询优化

1.1 建立合适的索引

  • 单列索引:针对查询条件的字段建立索引。
  • 联合索引 :针对多条件查询建立复合索引(注意索引的最左匹配原则)。
  • 覆盖索引:查询字段全部在索引中,避免回表。
sql 复制代码
CREATE INDEX idx_status_created ON orders(status, created_at);

**1.2 避免 SELECT ***

  • 只查询需要的字段,减少数据传输量。
sql 复制代码
SELECT id, name FROM users WHERE status = 'active';

1.3 分区 / 分表

  • 分区表:按时间或范围分区,减少单次扫描数据量。
  • 分表:按业务规则拆分成多个表,降低单表数据量。

1.4 读写分离

  • 主库负责写,多个从库负责读,缓解查询压力。

1.5 缓存

  • 使用 Redis / Memcached 缓存热点数据,减少数据库访问。

2. 超大分页处理

问题:

LIMIT offset, size 在 offset 很大时会扫描大量数据,性能很差。


优化方案 1:基于索引的"延迟关联"

sql 复制代码
SELECT u.* FROM users u JOIN ( SELECT id FROM users WHERE status = 'active' ORDER BY id LIMIT 100000, 20 ) t ON u.id = t.id;

原理:先用索引快速定位 ID,再回表取数据。


优化方案 2:基于主键的"游标分页"

sql 复制代码
SELECT * FROM users WHERE id > 100000 ORDER BY id LIMIT 20;

原理:记录上一次的最大 ID,下次直接从该 ID 往后查,避免扫描前面的数据。


优化方案 3:禁止深度分页

  • 对超过一定页数的查询,提示用户缩小范围或使用条件过滤。

3. SQL 查询慢的优化思路

3.1 使用 EXPLAIN 分析执行计划

sql 复制代码
EXPLAIN SELECT * FROM orders WHERE status = 'pending';

重点关注:

  • type (访问类型,越接近 const 越好)
  • key(使用的索引)
  • rows(扫描行数)

3.2 避免函数操作索引列

sql 复制代码
-- 慢
WHERE DATE(created_at) = '2025-10-25'
-- 快
WHERE created_at >= '2025-10-25' AND created_at < '2025-10-26'

3.3 避免 OR 导致索引失效

sql 复制代码
-- 慢
WHERE status = 'active' OR type = 'vip'
-- 快(拆成两次查询或用 UNION)
SELECT ... WHERE status = 'active' UNION ALL SELECT ... WHERE type = 'vip';

3.4 适当使用覆盖索引

sql 复制代码
CREATE INDEX idx_status_id ON orders(status, id);
SELECT id FROM orders WHERE status = 'pending';

4. 主键选择:自增 ID vs UUID

对比项 自增 ID UUID
存储空间 小(4~8字节) 大(16字节)
索引性能 高(顺序插入) 低(随机插入,索引碎片多)
可读性 简单递增 不可读
分布式唯一性 需额外方案(如雪花算法) 天然唯一
安全性 可推测数据量 不易推测

建议:

  • 单库单表 → 用自增 ID(性能好)
  • 分布式、多节点写入 → 用雪花算法(Snowflake)或优化版 UUID(如 UUIDv7,时间有序)
  • 不建议直接用随机 UUID 作为主键(索引性能差)

5. 总结优化策略

场景 优化方法
大表查询 索引优化、分区分表、缓存、读写分离
超大分页 延迟关联、游标分页、限制深度分页
SQL 慢查询 EXPLAIN 分析、避免函数操作索引列、避免 OR、覆盖索引
主键选择 单库用自增 ID,分布式用雪花算法或有序 UUID
相关推荐
CCIE-Yasuo2 小时前
网络安全-学习数据库-Mysql-2
数据库·学习·mysql
这个DBA有点耶2 小时前
内核级AI与多模融合:AI数据库在海外场景的落地要点
数据库·人工智能·架构
涛思数据(TDengine)2 小时前
从工业本体到 AI 原生:TDengine 出席 2026 QCon 分享工业数据基础设施路径
大数据·数据库·人工智能·tdengine·工业
Jesse_EC2 小时前
换乘次数最少的路径 SQL 查询详解与实战经验——从 WITH RECURSIVE 到 pgRouting
数据库·postgresql
工控丫丫2 小时前
帆软看板中经常使用的公式函数及经常搭的组合
前端·javascript·数据库
这个DBA有点耶3 小时前
云数据库半夜卡顿,CPU才30%?深挖云盘IOPS突发限制与内核挂起机制
数据库·mysql·云原生
无言听风雨丶4 小时前
Redis 运维实战与排错
运维·数据库·redis
小天源6 小时前
智叟云集系统 · 架构与职责分层
服务器·前端·数据库
herinspace6 小时前
管家婆实用贴-SQL 2008如何修改成混合模式
服务器·数据库·sql·管家婆软件·财务软件·合肥管家婆软件
打螺丝的小李6 小时前
制造企业质量管理系统的三类产品形态:分别解决什么问题
数据库·制造