SQL join和EXISTS效率

先看两个查询,查询目的是在a表中找出b表出现的vid

1.join查询

sql 复制代码
select a.vid, a.attach_url, a.attach_url_type, a.create_time
from ods_truck.tl_vehicle_attach_log a
         join (select distinct vid
               from ods_truck.tl_truck_log_20240613
               where oprater in ('remove', 'delete')
                 and cast(oprater_time as bigint) < unix_timestamp('20210101', 'yyyyMMdd') * 1000
) b on a.vid = b.vid;

2.exists查询

sql 复制代码
select a.vid, a.attach_url, a.attach_url_type, a.create_time
from ods_truck.tl_vehicle_attach_log a
where exists (
    select 1
    from ods_truck.tl_truck_log_20240613 b
    where a.vid = b.vid
      and oprater in ('remove', 'delete')
      and cast(oprater_time as bigint) < unix_timestamp('20210101', 'yyyyMMdd') * 1000
    )
exists 解释

exists 和 not exists 用于判断B表结果集是否在A表存在,这个使用select 1原因是exists 不需要判断具体的列,只需要知道有没有结果集返回

  • exists 有结果集返回为真
  • not exists 没有结果集返回为真

这里使用select 1没有查询所有的列,优化了查询效率

比较效率

第一种join

  • 优点:子查询先执行,只保留了满足条件的vid的去重集合,减少了主查询时需要比较的记录数,如果vid上有索引,可能会更高效。
  • 缺点:如果子查询返回大量不同的vid,则JOIN操作可能消耗较多资源

第二个查询(EXISTS方式)

  • 优点:EXISTS通常在找到第一个匹配项后就会停止后续的行搜索,因此对于外层表的每一行,内层查询不会全表扫描,这在内层表数据量大时非常高效。
  • 缺点:对于每个外层表的行,都需要执行一次内层查询,如果外层表非常大,这可能会导致较高的查询成本

总结

一般而言,如果内层查询(即满足特定条件的vid)返回的结果集较小,且外层表较大,EXISTS可能会更高效 ,因为它避免了不必要的全表扫描。相反,如果内层查询返回的结果集相对较大,而外层表较小,预先计算并JOIN去重结果集的方法可能会更优 。

实际效率还需根据具体的数据库系统优化器、索引策略、数据分布等因素来确定,建议在实际环境中进行性能测试来决定最佳方案。

相关推荐
多弗朗皮卡丘2 小时前
网络基础:数据链路层与其他协议或技术
linux·网络·tcp/ip
城北徐宫7 小时前
MySQL数据类型整理
数据库·mysql
数据库小学妹8 小时前
数据库容量规划:四个数与扩容触发线
运维·数据库·后端
时间的拾荒人8 小时前
Redis Cluster 集群详解:分片算法、搭建、故障处理与扩容实战
数据库·redis·算法·集群
dingdingfish8 小时前
TLPI 第52章 读书笔记:POSIX Message Queues
linux·mq·ipc·posix·message·tlpi
wacsii9 小时前
【Linux进程(五)】进程控制全解析:从创建、终止、等待到程序替换
linux·服务器
七夜zippoe9 小时前
Nexent Linux 部署:用 deploy.sh
linux·服务器·docker·部署·ai智能体·nexent
去码头整点薯条9810 小时前
NFS服务器
linux·运维·服务器
蜗牛一步步往上爬10 小时前
第一章 初识Linux shell
linux·运维·服务器