MySQL 深分页查询优化实践与经验总结

在企业级项目中,深分页查询经常会成为性能瓶颈。本篇文章总结了我在实践中优化深分页 SQL 的经验,包括 执行计划分析、索引优化、游标分页改写 等内容。


一、问题场景

假设我们有一张订单表 orders,包含字段:

复制代码
id, user_id, status, total_amount, create_time

原始查询为:

复制代码
SELECT id, user_id, status, total_amount, create_time
FROM orders
WHERE user_id = 12345
ORDER BY create_time DESC
LIMIT 990, 10;
  • 业务背景:查询某用户最近的订单,且需要支持分页。

  • 数据量假设:企业级通常几十万到几百万条订单。


二、原始 SQL 执行计划分析

使用 EXPLAIN查看原始 SQL:

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders ref user_id user_id 4 50 Using filesort

分析:

  1. type=ref → 使用了 user_id 索引进行精确匹配。

  2. key=user_id → 索引选择正确。

  3. Extra=Using filesort → ORDER BY create_time DESC 未覆盖索引,需要额外排序。

  4. 扫描行数 → MySQL 会扫描前 990 条行再丢弃(LIMIT 偏移量大),深分页效率低。

✅ 结论:单列索引只能加速 WHERE 条件,排序仍需额外操作。


三、复合索引优化

为了提升查询效率,我们创建复合索引:

复制代码
ALTER TABLE orders ADD INDEX idx_user_create (user_id, create_time DESC);
  • 作用

    1. 覆盖 WHERE user_id=... 条件。

    2. 覆盖 ORDER BY create_time DESC 条件。

  • 优化后 EXPLAIN

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders ref idx_user_create idx_user_create 8 20 Using index condition

分析:

  1. type=ref → ref → 使用索引范围扫描,避免全表扫描。

  2. key_len=8 → 复合索引长度增加。

  3. Extra=Using index condition → ICP (Index Condition Pushdown) 优化回表行数。

✅ 结论:复合索引同时覆盖 WHERE + ORDER BY,大幅减少扫描行数和排序成本。


四、游标分页改写

深分页仍有偏移量大的问题,可以改写为游标分页:

复制代码
SELECT id, user_id, status, total_amount, create_time
FROM orders
WHERE user_id = 12345 AND create_time < '2024-06-01 12:00:00'
ORDER BY create_time DESC
LIMIT 10;
  • 优势

    • 不用 OFFSET,避免扫描前面大量行。

    • 对大数据量分页性能稳定。

  • EXPLAIN 输出

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders range idx_user_create idx_user_create 8 10 Using index condition

✅ 结论:扫描行数恒定,排序在索引中完成,性能最佳。


五、实践总结

  1. 深分页性能问题

    • OFFSET 大时,MySQL 会扫描并丢弃大量行。

    • ORDER BY 未覆盖索引 → filesort

  2. 优化策略

    • 复合索引覆盖 WHERE + ORDER BY

    • 游标分页替代大 OFFSET 分页。

  3. EXPLAIN 解析技巧

    • type → 尽量是 refrangeconst,避免 ALL

    • key / key_len → 关注索引是否被正确使用。

    • Extra → 理解 Using index conditionUsing filesort

  4. 经验总结

    • 使用 ICP 能减少回表行数。

    • 游标分页适合大数据量分页查询。

    • SQL 优化不仅是索引,改写查询逻辑同样重要。

相关推荐
井川廊咏几秒前
初探性能优化——2个月到4小时的性能提升
jvm·数据库·性能优化
这个DBA有点耶2 分钟前
热点行更新:秒杀场景下一条UPDATE语句的锁等待与性能优化
数据库·sql·mysql·性能优化·database·dba
在水一缸6 分钟前
深入浅出:Node.js 下一代 ORM 架构设计与实战解析
数据库·微服务·云原生·node.js·orm·架构设计
爱喝水的鱼丶30 分钟前
SAP-ABAP:SELECT查询性能优化基础——索引匹配、条件顺序与缓冲机制利用技巧
数据库·性能优化·select·sap·abap·开发交流·交流学习
zhoupenghui16840 分钟前
ClickHouse merge引擎详解以及应用
数据库·clickhouse·merge·mergetree
@insist1231 小时前
信息系统管理工程师-任务、标准、EDM 过程与关键域
java·大数据·数据库
qq_366086221 小时前
关于接口路径中中文值解码问题
java·开发语言·数据库
ClouGence1 小时前
数据库为什么需要 SSL?一文了解 SSL 连接原理与配置
数据库·开源
一十九的酒1 小时前
Oracle 密码恢复实战:使用 SPARE4 哈希值还原用户密码
数据库·oracle·密码丢失·密码恢复·账户锁定
冰暮流星1 小时前
mysql之新建表及对表的查询
android·数据库·mysql