技术栈
etl优化
智码看视界
2 小时前
大数据
·
spark
·
性能调优
·
aqe
·
sparksql
·
数据倾斜
·
etl优化
Spark 3.5 AQE 调优：10 个生产环境案例让作业提速 3-10 倍
Spark 2.x 的查询执行计划是静态的——在作业提交时就确定了全部执行计划，基于的是统计信息估算，而非真实数据。
我是有底线的