MySQL 深分页查询优化实践与经验总结

在企业级项目中,深分页查询经常会成为性能瓶颈。本篇文章总结了我在实践中优化深分页 SQL 的经验,包括 执行计划分析、索引优化、游标分页改写 等内容。


一、问题场景

假设我们有一张订单表 orders,包含字段:

复制代码
id, user_id, status, total_amount, create_time

原始查询为:

复制代码
SELECT id, user_id, status, total_amount, create_time
FROM orders
WHERE user_id = 12345
ORDER BY create_time DESC
LIMIT 990, 10;
  • 业务背景:查询某用户最近的订单,且需要支持分页。

  • 数据量假设:企业级通常几十万到几百万条订单。


二、原始 SQL 执行计划分析

使用 EXPLAIN查看原始 SQL:

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders ref user_id user_id 4 50 Using filesort

分析:

  1. type=ref → 使用了 user_id 索引进行精确匹配。

  2. key=user_id → 索引选择正确。

  3. Extra=Using filesort → ORDER BY create_time DESC 未覆盖索引,需要额外排序。

  4. 扫描行数 → MySQL 会扫描前 990 条行再丢弃(LIMIT 偏移量大),深分页效率低。

✅ 结论:单列索引只能加速 WHERE 条件,排序仍需额外操作。


三、复合索引优化

为了提升查询效率,我们创建复合索引:

复制代码
ALTER TABLE orders ADD INDEX idx_user_create (user_id, create_time DESC);
  • 作用

    1. 覆盖 WHERE user_id=... 条件。

    2. 覆盖 ORDER BY create_time DESC 条件。

  • 优化后 EXPLAIN

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders ref idx_user_create idx_user_create 8 20 Using index condition

分析:

  1. type=ref → ref → 使用索引范围扫描,避免全表扫描。

  2. key_len=8 → 复合索引长度增加。

  3. Extra=Using index condition → ICP (Index Condition Pushdown) 优化回表行数。

✅ 结论:复合索引同时覆盖 WHERE + ORDER BY,大幅减少扫描行数和排序成本。


四、游标分页改写

深分页仍有偏移量大的问题,可以改写为游标分页:

复制代码
SELECT id, user_id, status, total_amount, create_time
FROM orders
WHERE user_id = 12345 AND create_time < '2024-06-01 12:00:00'
ORDER BY create_time DESC
LIMIT 10;
  • 优势

    • 不用 OFFSET,避免扫描前面大量行。

    • 对大数据量分页性能稳定。

  • EXPLAIN 输出

id select_type table type possible_keys key key_len rows Extra
1 SIMPLE orders range idx_user_create idx_user_create 8 10 Using index condition

✅ 结论:扫描行数恒定,排序在索引中完成,性能最佳。


五、实践总结

  1. 深分页性能问题

    • OFFSET 大时,MySQL 会扫描并丢弃大量行。

    • ORDER BY 未覆盖索引 → filesort

  2. 优化策略

    • 复合索引覆盖 WHERE + ORDER BY

    • 游标分页替代大 OFFSET 分页。

  3. EXPLAIN 解析技巧

    • type → 尽量是 refrangeconst,避免 ALL

    • key / key_len → 关注索引是否被正确使用。

    • Extra → 理解 Using index conditionUsing filesort

  4. 经验总结

    • 使用 ICP 能减少回表行数。

    • 游标分页适合大数据量分页查询。

    • SQL 优化不仅是索引,改写查询逻辑同样重要。

相关推荐
数据知道2 小时前
MySQL业务数据量增长到单表成为瓶颈时,该如何做?
数据库·mysql·mysql优化
soft20015252 小时前
深入理解 MySQL Buffer Pool 核心机制:初始化、free 链表与数据页流转
数据库·mysql·链表
晓13132 小时前
SQL篇——【MySQL篇:运维】高可用架构搭建(主从、读写分离、分库分表)
android·数据库·mysql
JavaOpsPro3 小时前
上云后mysql默认wait_timeout导致应用层很多连接不可用
数据库·mysql
GEM的左耳返3 小时前
互联网大厂Java求职面试题解析与实战指导:涵盖核心技术栈与业务场景
java·数据库·spring boot·安全·微服务·消息队列·面试题
越甲八千3 小时前
ASGI和AWSIG区别
数据库·python·sqlite
数据库学啊3 小时前
性价比高的车联网时序数据库供应商有哪些
数据库·时序数据库
laocooon5238578863 小时前
C语言枚举知识详解与示例
java·c语言·数据库
yuxuan66994 小时前
【Docker】使用docker启动禅道出现mysql.sock 文件已经存在的bug
mysql·docker·centos·bug