涉及海量数据的查询SQL建议使用“数据库函数”封装并调用

一、问题描述

生产环境中,核心业务表数据量随业务增长迅速膨胀,原统计查询SQL因执行计划劣化、索引失效而突然变慢。若按传统流程修复,需要优化SQL、测试、重新打包、发版,并且SQL优化往往需要多轮迭代、持续打磨;若每次调整都要重走发版流程,时间和风险成本将被无限放大。最终无法快速解决问题,易引发用户投诉。

二、"数据库函数封装"方案(代码仅需改一行)

面对上述问题场景,我们可以将整条海量数据查询SQL封装为数据库函数 。应用层仅需调用统一的函数接口,查询逻辑下沉至数据库内部;后续无论加Hint、改索引、调整执行计划,均可通过++CREATE OR REPLACE FUNCTION++秒级生效,无需再次测试、打包、发版,实现真正的零停机热更与持续迭代优化。

改造前,应用层SQL常规写法

sql 复制代码
<select id="querySysUserList" parameterType="cn.gdxiash.calculationdemo.entity.SysUser"
            resultType="cn.gdxiash.calculationdemo.entity.SysUser">
    SELECT * FROM SYS_USER 
    <where>
        <if test="name!=null and name!=''">
            NAME LIKE '%' || #{name} || '%'
        </if>
        <if test="age!=null and age>=0">
            AGE = #{age}
        </if>
    </where>
</select>

改造后,应用层SQL写法

sql 复制代码
<select id="querySysUserList" parameterType="cn.gdxiash.calculationdemo.entity.SysUser"
            resultType="cn.gdxiash.calculationdemo.entity.SysUser">
    SELECT * FROM TABLE(F_GET_SYS_USER_LIST(#{name},#{age}))
</select>
三、简单样例实现
1、创建SYS_USER表
sql 复制代码
CREATE TABLE "SHANGHAI"."SYS_USER"
(
"ID" VARCHAR2(36) NOT NULL,
"NAME" VARCHAR2(50),
"AGE" NUMBER(3,0),
CLUSTER PRIMARY KEY("ID")) STORAGE(ON "MAIN", CLUSTERBTR) ;
2、创建自定义类型
sql 复制代码
-- 创建自定义类型
CREATE OR REPLACE TYPE T_SYS_USER AS OBJECT(
ID VARCHAR2(36),
NAME VARCHAR2(50),
AGE NUMBER(3,0));
-- 创建自定义类型集合
CREATE OR REPLACE TYPE T_SYS_USER_LIST AS TABLE OF T_SYS_USER;
3、将业务SQL封装成函数(可随时通过REPLACE进行修改)
sql 复制代码
-- 创建查询函数
CREATE OR REPLACE FUNCTION F_GET_SYS_USER_LIST(
    P_NAME IN VARCHAR2 DEFAULT NULL,  -- 允许不传
    P_AGE  IN NUMBER   DEFAULT NULL   -- 允许不传
) RETURN T_SYS_USER_LIST
IS
    V_LIST T_SYS_USER_LIST := T_SYS_USER_LIST();
BEGIN
    SELECT T_SYS_USER(ID, NAME, AGE)
    BULK COLLECT INTO V_LIST
    FROM SYS_USER
    WHERE (P_NAME IS NULL OR NAME LIKE '%' || P_NAME || '%')
      AND (P_AGE  IS NULL OR AGE  = P_AGE);
    RETURN V_LIST;
END;
4、将代码的查询语句进行改造

原SQL

sql 复制代码
<select id="querySysUserList" parameterType="cn.gdxiash.calculationdemo.entity.SysUser"
            resultType="cn.gdxiash.calculationdemo.entity.SysUser">
    SELECT * FROM SYS_USER 
    <where>
        <if test="name!=null and name!=''">
            NAME LIKE '%' || #{name} || '%'
        </if>
        <if test="age!=null and age>=0">
            AGE = #{age}
        </if>
    </where>
</select>

将原SQL修改为查询数据库函数

sql 复制代码
<select id="querySysUserList" parameterType="cn.gdxiash.calculationdemo.entity.SysUser"
            resultType="cn.gdxiash.calculationdemo.entity.SysUser">
    SELECT * FROM TABLE(F_GET_SYS_USER_LIST(#{name},#{age}))
</select>
相关推荐
镰刀韭菜10 小时前
用 AI 做数据分析时,怎么保住自己的思考力
sql·数据分析·学习方法·提示工程·ai应用
Databend10 小时前
用 SQL 排查支付故障,OpenTelemetry 接入 Databend Cloud 实战
大数据·数据库·sql
Decay__1 天前
SQLServer 运维自动化平台 —— PowerShell + SQL Agent 作业:部署、监控、巡检、告警、工单闭环一体化
运维·数据库·sql·mysql·架构
星恒随风1 天前
MySQL 从零入门(十):MVCC、Undo Log 与 Read View 详解——InnoDB 如何实现事务隔离?
linux·数据库·笔记·sql·mysql
乌暮2 天前
少写重复 CRUD:用大白话搞懂 MyBatis-Plus
java·开发语言·spring boot·面试·mybatis
CoderYanger2 天前
Java EE 进阶:9.MyBatis 操作数据库(进阶)(第四弹):图书管理系统(用户登录+添加图书)
java·数据库·spring boot·mysql·面试·java-ee·mybatis
Decay__2 天前
附 - 02・SQLServer 分库分表与中间件 —— 原生分区表、横向分库实践与联邦查询
运维·数据库·sql·mysql·架构
牧瀬クリスだ2 天前
从零手写博客系统:分层架构与统一响应(一)
java·数据库·架构·mybatis·springboot·安全架构
Decay__2 天前
SQLServer 优化案例集 —— 慢 SQL 优化、索引重构与参数调整收益对比
运维·数据库·sql·mysql·架构
CoderYanger2 天前
Java EE 进阶:9.MyBatis 操作数据库(进阶)(第二弹)
java·数据库·面试·职场和发展·java-ee·tomcat·mybatis