driver 端 之输出文件
如果我们碰到有spark任务所有task结束了但是任务还没结束，很可能就是Driver还在不断的拷文件；
涉及参数：
mapreduce.fileoutputcommitter.algorithm.version = 1
mapreduce.fileoutputcommitter.algorithm.version = 2可以参考如下
spark 之 driver
zhixingheyi_tian2023-10-12 19:48
相关推荐
长相易乐几秒前
RabbitMQ 教程月夕·花晨27 分钟前
Gateway -网关失散1327 分钟前
分布式专题——6 Redis缓存设计与性能优化BYSJMG34 分钟前
计算机毕设选题：基于Python+MySQL校园美食推荐系统【源码+文档+调试】索迪迈科技2 小时前
Flink Task线程处理模型：Mailboxzzhongcy3 小时前
分布式存储：RustFS与MinIO全面对比一叶飘零_sweeeet7 小时前
从手写 Redis 分布式锁到精通 Redisson：分布式系统的并发控制终极指南深空数字孪生7 小时前
储能调峰新实践：智慧能源平台如何保障风电消纳与电网稳定？百胜软件@百胜软件8 小时前
胜券POS：打造智能移动终端，让零售智慧运营触手可及摩羯座-185690305949 小时前
Python数据可视化基础：使用Matplotlib绘制图表