driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
腾讯云大数据11 小时前
腾讯云大数据计算智能：从结构化 SQL 到多模态 AI Workload 的融合范式AI职业加油站12 小时前
大数据采集工程师：技术栈全景图与实战路径老白讲技术13 小时前
2026年国内APP开发与软件定制服务商能力观察：从AI应用到行业系统开发荣-13 小时前
从两天到十几分钟：一套 YT Crash 自动化分析工具完整工程复盘人工智能培训15 小时前
大模型驱动下传统大数据架构的变革方向蜡笔削薪16 小时前
财联万业（杭州）数字科技有限公司能否给代理划定独家经营区域？笨鸟先飞的橘猫16 小时前
skynet——分布式支持动恰客流统计16 小时前
零食集合店爆火背后：客流统计技术如何重构新零售运营决策B8017913Y19 小时前
2026撰写行业报告总写不完零散专业词汇？可系统梳理行业专业词汇2601_9623413019 小时前
计算机毕业设计之jsp考研在线复习平台