ERROR CoarseGrainedExecutorBackend: RECEIVED SIGNAL TERM

如果你的spark on yarn任务正常运行,能得到结果,但是日志中出现了如下的报错

看见这个报错不要慌张,这个是你开启了动态伸缩容器,且当这个容器触发了空闲关闭的阈值,默认是60秒,这时候该容器会被删除掉,yarn上就会出现这个错误,你查看driver的标准错误输出会发现类型如下的容器移除信息

bash 复制代码
INFO ExecutorMonitor: Executor 83 is removed
相关推荐
MXsoft6184 分钟前
基于Dell Idrac7的服务器硬件监控指标解读
大数据·运维
锵锵锵锵~蒋37 分钟前
实时数据开发 | Flink反压机制原因、影响及解决方案
大数据·flink
重生之绝世牛码1 小时前
Java设计模式 —— 【创建型模式】原型模式(浅拷贝、深拷贝)详解
java·大数据·开发语言·设计模式·原型模式·设计原则
Sui_Network1 小时前
Panzerdogs 游戏宣布将在 SuiPlay0X1 上线
大数据·人工智能·游戏·web3·区块链
大数据编程之光2 小时前
Hadoop Namenode与Resourcemanager高可用搭建教程
大数据·hadoop·分布式
Elastic 中国社区官方博客3 小时前
使用 Jina Embeddings v2 在 Elasticsearch 中进行后期分块
大数据·人工智能·elasticsearch·搜索引擎·ai·全文检索·jina
zwm_yy3 小时前
git源码安装
大数据·elasticsearch·搜索引擎
天冬忘忧4 小时前
Flink--API 之Transformation-转换算子的使用解析
大数据·flink
高登先生4 小时前
智能驾驶,车联网,传感器,车载电子集中展示|2025北京自动驾驶展
大数据·人工智能·科技·数学建模·能源