游标分批查询,提高查询性能

大批量数据查询的方案

数据表,在查找大批量数据,或者滚动查询页面时,

如果使用全量查询,可能会因为查询时间过久,触发超时。

如果使用 LIMIT 分批查询,查到最后几页时,由于偏移量越来越大,查询会越来越慢。

数据表,在查找大批量数据,或者滚动查询页面时,可以使用游标分批查询。

游标分批查询

游标分批查询,也就是根据id 分批查找。

利用主键(或唯一索引)的有序性,每次记住上一次查询的最后一条 ID,下一批只取 ID 更大的记录,直到取完。

这种方式可以避免使用 OFFSET 导致的大偏移量性能问题。

sql 示例:

复制代码
-- 第一批:取前 1000 条
SELECT * FROM user WHERE id > 0 ORDER BY id LIMIT 1000;
-- 假设结果中最大的 id 为 1000

-- 第二批:取 id > 1000 的下 1000 条
SELECT * FROM user WHERE id > 1000 ORDER BY id LIMIT 1000;
-- 依此类推
相关推荐
程序猿乐锅4 小时前
从0-1一文详解RabbitMQ
java·分布式·后端·中间件·rabbitmq·ruby
考虑考虑7 小时前
JDK26中的List.ofLazy()
java·后端·java ee
小蒜学长7 小时前
基于SpringBoot的公寓报修管理系统的设计与实现(代码+数据库+LW)
java·spring boot·后端·公寓报修管理系统·多角色协同
for_ever_love__8 小时前
MySQL 主从复制讲透:binlog 原理、搭建步骤与读写分离
java·数据库·mysql·binlog·读写分离·原理·主从复制
小π军10 小时前
操作系统面试题
java·linux·服务器
倔强的石头10610 小时前
应用账号最小权限实践:读写账号、报表账号、运维账号分层
java·运维·开发语言
Shaoshing11 小时前
ThreadLocal
java·jvm·threadlocal
写后端的胖头鱼11 小时前
一文详解CAS
java·jvm·spring·cas·乐观锁·自旋
鱼宵11 小时前
Spring AI 提示词模板:{变量} 参数化 + few-shot,一条提示词反复用
java·人工智能·spring·few-shot·提示词工程·springai