Spark rule

Ali:

spark.celeborn.client.adaptive.optimizeLocalShuffleRead.enabled提升了200s

spark.sql.optimizer.enableMergeScalarAggsInInnerJoin=true q88提升了32s

优化空间

q67:

topn+agg

Q95:

self解关联

decimal 计算优化

q24b-v2.4

q23a-v2.4

q14a-v2.4

cte

q23b-v2.4

Agg push down through join

project push down through join

Q72: Join Order调优;

Q14: Distinct下推到Intersect之前;

相关推荐
AI探索先锋8 分钟前
AMD 2nm 芯片炸裂、欧洲首家人形机器人独角兽诞生、AI Agent 互联标准打响:10 条信号看懂产业变局|今日科技 AI 机器人快讯
大数据·人工智能·深度学习·搜索引擎·机器人
zzzll11111 小时前
字节 Agent 三面:讲讲 Agent 的记忆系统怎么设计?
大数据
聚焦前沿1 小时前
涡街流量计用户如何判断厂家是否靠谱
大数据·人工智能
莫名的好感°3 小时前
国内AI视频工具哪家强?FusionAI聚合即梦Seedance、可灵Kling、HappyHorse、Google Veo,一个平台看懂所有选择
大数据·人工智能
咖啡星人k3 小时前
企业内网引入 AI 编程:MonkeyCode 私有化部署思路
大数据·人工智能·私有化部署·monkeycode
爱吃提升4 小时前
python 分布式爬虫、爬虫合规与综合实战项目
分布式·爬虫·python
oort1234 小时前
吃上了自家的细糠,还挺丝滑,用起来手感还行,OortCloud发布新版AI编程平台,下载 OortCodex,Token多,免费薅
大数据·开发语言·人工智能·ai编程
AI小码4 小时前
把动作「画」给视频世界模型,跨本体双向推演,李飞飞参与
大数据·人工智能·算法·ai·大模型·音视频·编程
Elastic 中国社区官方博客6 小时前
不到 5 分钟完成本地部署:Jina embedding 模型现已支持本地部署
大数据·人工智能·elasticsearch·搜索引擎·embedding·jina
二进制流水搬运工6 小时前
入职第一天拉了23个仓库,我写了个脚本解放双手
大数据·elasticsearch·搜索引擎