driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
菜鸡儿齐5 小时前
spark组件-spark core（批处理）-rdd创建weixin_177297220697 小时前
家政小程序系统开发：打造便捷高效的家政服务平台galaxylove8 小时前
Gartner发布数据安全态势管理市场指南：将功能扩展到AI的特定数据安全保护是DSPM发展方向keke_俩个科12 小时前
ShardingSphere分库分表基础配置与使用说明扁豆的主人13 小时前
分布式一致性扁豆的主人14 小时前
Elasticsearch想ai抽15 小时前
Flink重启策略有啥用TMT星球15 小时前
TCL华星t8项目正式开工，总投资额约295亿元阿里云大数据AI技术15 小时前
云栖实录 | 驶入智驾深水区：广汽的“数据突围“之路