分页查询列表每页1000条的优化

项目中有一个客户列表,要求每页显示1000条,并且字段很多,接口返回大概要10秒钟,进行优化.

原本逻辑:使用mybatisplus构建查询条件,分页查询客户表,查出数据库DO对象,然后for循环转化成回显的VO对象.在转化的过程中出现了查库代码,导致当每页条数1000时,每一个客户转化都需要查询一次,造成了几千次的IO.

前提条件,已经构建了相关的索引.

首次优化,避免在转换VO的过程中出现查库代码,提前收集客户id列表,查询相关的员工信息,部门信息等等,并根据关联id转成一个map,把map直接放到转换代码中,这样只查一次,多次使用

第二点优化:如果数量大于100条时,每个线程100条,多个线程同时执行

第三处优化:其实查询sql并不算很慢,但是因为对象很大,转换的过程比较慢,直接使用mybatis查询mybatisplus构建的条件,使查出的结果直接是客户VO而不是客户DO,省略了复制转换的过程

csharp 复制代码
    Page<ClientListVO> paging(@Param("page") Page<ClientListVO> cachePage, @Param(Constants.WRAPPER) LambdaQueryWrapper<ClientDO> wrapper);
csharp 复制代码
        <select id="paging" resultType="com.ruoyi.system.domain.vo.ClientListVO">
            select * from client ${ew.getCustomSqlSegment}
    </select>

为什么能直接在 MyBatis XML 中使用 Wrapper?

MyBatis-Plus 在底层做了以下处理:

参数绑定:通过 @Param(Constants.WRAPPER) 注解,将 wrapper 对象绑定到 ew 变量名。

SQL 解析:Wrapper 内部会解析你调用的方法(如 eq(), orderBy()),生成对应的 SQL 片段。

变量替换:在 XML 中,${ew.getCustomSqlSegment} 会调用 wrapper.getCustomSqlSegment() 方法,返回生成的 SQL 片段。

经过多次优化以后接口查询1000条仅用时几百毫秒.

相关推荐
程序员JerrySUN1 小时前
基于 RAUC 的 Jetson OTA 升级全攻略
java·数据库·redis
努力冲冲1 小时前
常用排序算法
java·算法·排序算法
yuezhilangniao3 小时前
关于开发语言的一些效率 从堆栈角度理解一部分c java go python
java·c语言·开发语言
布朗克1683 小时前
MySQL UNION 操作符详细说明
数据库·mysql·union
码luffyliu3 小时前
Java NIO 核心原理与秋招高频面试题解析
java·nio
一只叫煤球的猫3 小时前
⚠️ 不是危言耸听,SpringBoot正在毁掉Java工程师
java·spring boot·spring
vvilkim4 小时前
深入理解Java访问修饰符:封装的艺术
java·开发语言
張萠飛4 小时前
生产环境Tomcat运行一段时间后,如何测试其性能是否满足后续使用
java·tomcat
Hurry64 小时前
web应用服务器tomcat
java·前端·tomcat
hqxstudying5 小时前
java分布式定时任务
java·开发语言·分布式