[yarn]yarn异常

一、运行一下算圆周率的测试代码,看下报错

cd /home/data_warehouse/module/hadoop-3.1.3/share/hadoop/mapreduce

hadoop jar hadoop-mapreduce-examples-3.1.3.jar pi 1000 1000

后面2个数字参数的含义:

第1个1000指的是要运行1000次map任务

第2个数字指的是每个map任务,要投掷多少次

二、查看日志

发现ck1节点上的所有任务都无法运行

报错信息

2023-11-08 10:23:47.808Exception from container-launch. Container id: container_1699409993095_0001_01_000345 Exit code: 255 2023-11-08 10:23:47.809Container exited with a non-zero exit code 255. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err : 2023-11-08 10:23:47.809Container exited with a non-zero exit code 255. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err :

三、无法解决异常,但是需要运行任务

直接kill掉ck1上的nodemanager进程,这样任务可以直接在ck2和ck3上运行

相关推荐
IT毕设梦工厂10 小时前
计算机毕业设计选题推荐:基于大数据的印度上市公司财务指标数据可视化分析|毕业设计选题|计算机毕设|选题推荐|毕设指导|项目定制|源码|高质量项目
大数据·hadoop·python·信息可视化·spark·课程设计·大数据毕设项目
爱吃火鸡面呀15 小时前
HDFS 文件读取流程深度解析:从客户端请求到数据落地的完整链路
大数据·hadoop·hdfs
kaoa00016 小时前
Linux入门攻坚——89、Hadoop-1-架构及概念
大数据·linux·hadoop·分布式
BYSJMG16 小时前
计算机毕业设计选题推荐:基于大数据的水质多指标关联分析与可视化的设计与实现,Spark 加 K-Means 做水质分群
大数据·hadoop·信息可视化·数据分析·spark·kmeans·课程设计
计算机源码社17 小时前
【大数据项目实战】基于Python数据挖掘的新能源车充电行为关联风险分析研究-基于Hadoop+Spark的电动汽车故障多维数据可视化
大数据·hadoop·python·数据挖掘·spark·毕业设计·课程设计
磁场转动100万匹2 天前
大数据入门:Hadoop 与 MapReduce 学习路线
大数据·hadoop·mapreduce
崖边看雾2 天前
Hadoop —— HDFS 写数据流程
大数据·hadoop·hdfs
陈年老古董2 天前
Python模拟MapReduce分治思想 | 从单文件统计到大文件拆分聚合 学习笔记
开发语言·hadoop·笔记·python·学习
崖边看雾2 天前
Hadoop —— MapReduce完整工作流程
大数据·mapreduce
崖边看雾2 天前
Hadoop —— HDFS 读流程
大数据·hadoop·hdfs