Spark rule

Ali:

spark.celeborn.client.adaptive.optimizeLocalShuffleRead.enabled提升了200s

spark.sql.optimizer.enableMergeScalarAggsInInnerJoin=true q88提升了32s

优化空间

q67:

topn+agg

Q95:

self解关联

decimal 计算优化

q24b-v2.4

q23a-v2.4

q14a-v2.4

cte

q23b-v2.4

Agg push down through join

project push down through join

Q72: Join Order调优;

Q14: Distinct下推到Intersect之前;

相关推荐
言之。21 小时前
TiDB分布式数据库技术架构概述
数据库·分布式·tidb
老夫的码又出BUG了21 小时前
分布式Web应用场景下存在的Session问题
前端·分布式·后端
杂家21 小时前
Hadoop完全分布式部署(超详细)
大数据·hadoop·分布式
BD_Marathon21 小时前
【Hadoop】hadoop3.3.1完全分布式配置
大数据·hadoop·分布式
Ryan ZX21 小时前
etcd 高可用分布式键值存储
数据库·分布式·etcd
大G的笔记本1 天前
分布式答案解析
分布式
Ashlee_code1 天前
BSS供应商:电信与金融领域的幕后支撑者
大数据·网络·金融·系统架构·跨境·金融机构·场外期权
Tadas-Gao1 天前
MySQL存储架构解析:从数据无序到索引艺术的演进
数据库·分布式·mysql·微服务·云原生·架构
鸽鸽程序猿1 天前
【RabbitMQ】工作模式实现
分布式·rabbitmq
筑梦之人1 天前
Spark-3.5.7文档3 - Spark SQL、DataFrame 和 Dataset 指南
spark