spark sql 优化

1. 配置 比例内存 : core = 1:2

2. 增加 core 数可以增加 执行任务的 线程数

3. 计算有大表，并发生shuffle 时，生成的任务数是由spark.sql.shuffle.partitions 决定的，所以针对大表shuffle ，要增加spark.sql.shuffle.partitions 配置值，不然有很多core 处于空闲状态