SQL join和EXISTS效率

先看两个查询,查询目的是在a表中找出b表出现的vid

1.join查询

sql 复制代码
select a.vid, a.attach_url, a.attach_url_type, a.create_time
from ods_truck.tl_vehicle_attach_log a
         join (select distinct vid
               from ods_truck.tl_truck_log_20240613
               where oprater in ('remove', 'delete')
                 and cast(oprater_time as bigint) < unix_timestamp('20210101', 'yyyyMMdd') * 1000
) b on a.vid = b.vid;

2.exists查询

sql 复制代码
select a.vid, a.attach_url, a.attach_url_type, a.create_time
from ods_truck.tl_vehicle_attach_log a
where exists (
    select 1
    from ods_truck.tl_truck_log_20240613 b
    where a.vid = b.vid
      and oprater in ('remove', 'delete')
      and cast(oprater_time as bigint) < unix_timestamp('20210101', 'yyyyMMdd') * 1000
    )
exists 解释

exists 和 not exists 用于判断B表结果集是否在A表存在,这个使用select 1原因是exists 不需要判断具体的列,只需要知道有没有结果集返回

  • exists 有结果集返回为真
  • not exists 没有结果集返回为真

这里使用select 1没有查询所有的列,优化了查询效率

比较效率

第一种join

  • 优点:子查询先执行,只保留了满足条件的vid的去重集合,减少了主查询时需要比较的记录数,如果vid上有索引,可能会更高效。
  • 缺点:如果子查询返回大量不同的vid,则JOIN操作可能消耗较多资源

第二个查询(EXISTS方式)

  • 优点:EXISTS通常在找到第一个匹配项后就会停止后续的行搜索,因此对于外层表的每一行,内层查询不会全表扫描,这在内层表数据量大时非常高效。
  • 缺点:对于每个外层表的行,都需要执行一次内层查询,如果外层表非常大,这可能会导致较高的查询成本

总结

一般而言,如果内层查询(即满足特定条件的vid)返回的结果集较小,且外层表较大,EXISTS可能会更高效 ,因为它避免了不必要的全表扫描。相反,如果内层查询返回的结果集相对较大,而外层表较小,预先计算并JOIN去重结果集的方法可能会更优 。

实际效率还需根据具体的数据库系统优化器、索引策略、数据分布等因素来确定,建议在实际环境中进行性能测试来决定最佳方案。

相关推荐
Henry-SAP4 小时前
PP的生产调度员(Production Scheduler)的角色与配置
数据库
少司府4 小时前
嵌入式外设篇(二)GPIO·二:GPIO输出与LED控制
linux·stm32·单片机·嵌入式硬件·mcu·51单片机·系统
Rabitebla5 小时前
【Linux操作系统】 文件篇(一):文件描述符与 Linux 文件管理机制
linux·网络·c++·笔记·学习
Flynn Liang6 小时前
HikariCP 连接池不是越大越好:I/O 密集型 Java 服务的数据库容量工程
java·数据库·mysql·高并发·连接池·hikaricp·sql 优化
发疯的技术鼠7 小时前
03-优先级与调度
linux
小乖写代码8 小时前
消息、回执与媒体 · msgstore.db · Messages, Receipts, and Media
数据库·媒体·whatsapp·消息回执
无足鸟ICT8 小时前
【RHCA+】sosreport(收集诊断文档)
linux·运维·服务器
GeW9 小时前
世界目光聚焦中国:底层技术、Linux、数据库的破局逻辑
linux·数据库
PingCAP9 小时前
平凯数据库 × 圣诺云数:让治理数据实时可用、跨域可信流通
数据库·tidb
利威尔xu9 小时前
PostgreSQL 索引失效 4 类:函数运算让查询全表扫描拖垮性能
开发语言·数据库·postgresql·性能优化·索引优化