driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
勇往直前plus1 小时前
ElasticSearch详解（篇一）无心水3 小时前
【分布式利器：Kafka】1、Kafka 入门：Broker、Topic、分区 3 张图讲透（附实操命令）九皇叔叔3 小时前
Zookeeper 基础入门与应用场景解析一只小青团4 小时前
Hadoop之HDFSITVV4 小时前
hadoop-3.4.1 单机伪部署小杜谈数5 小时前
企业BI建议--数据治理平台西岭千秋雪_5 小时前
Kafka安装和使用谅望者5 小时前
数据分析笔记07：Python编程语言介绍qq_281317476 小时前
Kafka中国国际健康产业博览会8 小时前
2026第35届中国国际健康产业博览会探索健康与科技的完美结合！