多线程优化无效(其中一个线程执行10秒导致)

尽量避免循环写sql,row_number 实际基本应用

一、原来sql

java 复制代码
    // 原来是 t1 表和t2 表关联,查t1的code,同时要是t2 表某个属性xx 降序后取一个
    String sql ="    SELECT t1.*, t2.xx, " +
            "    FROM table1 t1 " +
            "    LEFT JOIN table2 t2 ON t1.id = t2.table1_id " +
            "    WHERE t1.code = '{}' order by t2.xx desc fetch first 1 rows only ";
//    在循环中写sql
    for(YourObject item : objectList){
        String code = item.getCode();
        Map<Stirng,Object> resultMap = getSqlMapper().selectOne(strUtil.format(sql,code));
//        查出结果继续别的处理
    }

二、优化后sql

java 复制代码
    public void processWithRowNumber(List<YourObject> objectList) {
        if (objectList.isEmpty()) return;
        
        Set<Long> codeSet = objectList.stream()
            .map(YourObject::getCode)
            .collect(Collectors.toSet());
        
        String inClause = codeSet.stream()
            .map(String::valueOf)
            .collect(Collectors.joining(","));
        
        // 使用ROW_NUMBER()为每个ID分组,取最新的一条
        String sql = "SELECT * FROM (" +
                     "    SELECT t1.*, t2.xx, " +
                     "           ROW_NUMBER() OVER (PARTITION BY t1.id ORDER BY t2.xx DESC) as rn " +
                     "    FROM table1 t1 " +
                     "    LEFT JOIN table2 t2 ON t1.id = t2.table1_id " +
                     "    WHERE t1.code IN (" + inClause + ")" +
                     ") WHERE rn = 1";
        
        List<Map<String, Object>> results = sqlMapper.selectList(sql);
        
        // 构建映射关系
        Map<Long, Map<String, Object>> resultMap = results.stream()
            .collect(Collectors.toMap(
                result -> ((Number) result.get("CODE")).longValue(),
                result -> result
            ));
        
        // 处理结果
        for (YourObject obj : objectList) {
            Map<String, Object> result = resultMap.get(obj.getCode());
            if (result != null) {
                processSingleResult(obj, result);
            }
        }
    }

三、总结

这是row_number 实际基本应用(用于优化sql放在循环外)

将sql拿出循环就是 用row_number() over()原因

之前博客记录 row_number用法 Row number 函数用法

实际项目使用过 row_number 实际基本应用

相关推荐
Coder_Boy_6 小时前
技术让开发更轻松的底层矛盾
java·大数据·数据库·人工智能·深度学习
helloworldandy6 小时前
使用Pandas进行数据分析:从数据清洗到可视化
jvm·数据库·python
invicinble6 小时前
对tomcat的提供的功能与底层拓扑结构与实现机制的理解
java·tomcat
较真的菜鸟6 小时前
使用ASM和agent监控属性变化
java
黎雁·泠崖6 小时前
【魔法森林冒险】5/14 Allen类(三):任务进度与状态管理
java·开发语言
数据知道8 小时前
PostgreSQL 故障排查:如何找出数据库中最耗时的 SQL 语句
数据库·sql·postgresql
qq_12498707538 小时前
基于SSM的动物保护系统的设计与实现(源码+论文+部署+安装)
java·数据库·spring boot·毕业设计·ssm·计算机毕业设计
枷锁—sha8 小时前
【SRC】SQL注入WAF 绕过应对策略(二)
网络·数据库·python·sql·安全·网络安全
Coder_Boy_8 小时前
基于SpringAI的在线考试系统-考试系统开发流程案例
java·数据库·人工智能·spring boot·后端
Mr_sun.8 小时前
Day06——权限认证-项目集成
java