driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
全栈陈序员3 小时前
【Git】从入门到精通（五）—— git add：将文件加入暂存区KKKlucifer5 小时前
国内数据安全服务的产品智能化转型：大模型赋能下的技术能力重构分析故七月6 小时前
AI 答案里的竞品共现：怎么看出赛道格局全栈陈序员6 小时前
【Git】从入门到精通（七）—— git status：查看仓库状态fengye2071617 小时前
第三章 编译cpython大大大大晴天7 小时前
每天认识一个组件：Apache Flink涛思数据（TDengine）8 小时前
从工业本体到 AI 原生：TDengine 出席 2026 QCon 分享工业数据基础设施路径Gu_WenYun8 小时前
从主题定价到订单定价：机器人基金的产业链观察其实防守也摸鱼9 小时前
信创安全竞赛知识总结与题库刀笔财经9 小时前
新时达的选择：先造血，再谈利润