driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2
可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
AZDNA31 分钟前
搭建医疗行业AI知识库：提升信息管理与服务效能zhangpfly36 分钟前
OpenEuler22.04配置zookeeper+kafka三节点集群time never ceases37 分钟前
Elasticsearch安装和数据迁移袖清暮雨1 小时前
5_SparkGraphX讲解程序员shen1616111 小时前
注意⚠️:矩阵系统源码开发/SaaS矩阵系统开源/抖音矩阵开发优势和方向百家方案1 小时前
「下载」智慧园区及重点区域安全防范解决方案：框架统一规划，建设集成管理平台员宇宙2 小时前
【RabbitMQ的死信队列】Allen Bright3 小时前
RabbitMQ中的批量Confirm模式：提升消息可靠性与性能小刘鸭!3 小时前
Flink窗口window详解（分类、生命周期、窗口分配器、窗口函数、触发器）出发行进3 小时前
Hive其九，排名函数，练习和自定义函数