[yarn]yarn异常

一、运行一下算圆周率的测试代码,看下报错

cd /home/data_warehouse/module/hadoop-3.1.3/share/hadoop/mapreduce

hadoop jar hadoop-mapreduce-examples-3.1.3.jar pi 1000 1000

后面2个数字参数的含义:

第1个1000指的是要运行1000次map任务

第2个数字指的是每个map任务,要投掷多少次

二、查看日志

发现ck1节点上的所有任务都无法运行

报错信息

2023-11-08 10:23:47.808\]Exception from container-launch. Container id: container_1699409993095_0001_01_000345 Exit code: 255 \[2023-11-08 10:23:47.809\]Container exited with a non-zero exit code 255. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err : \[2023-11-08 10:23:47.809\]Container exited with a non-zero exit code 255. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err : 三、无法解决异常,但是需要运行任务 直接kill掉ck1上的nodemanager进程,这样任务可以直接在ck2和ck3上运行

相关推荐
WL_Aurora32 分钟前
MapReduce经典例题【第二期】
大数据·mapreduce
二十六画生的博客39 分钟前
每个subtask都提交一份快照到hdfs,会把10个小的快照合并成一个大的吗?谁来合并?
大数据·hadoop·hdfs·flink
隐于花海,等待花开1 小时前
41.ABS / POW / SQRT 函数深度解析
大数据·hive
千月落3 小时前
HDFS数据迁移
大数据·hadoop·hdfs
隐于花海,等待花开1 天前
40.RAND 函数深度解析
hive·hadoop
孤雪心殇2 天前
快速上手数仓基础知识
数据仓库·hive·spark
WL_Aurora2 天前
MapReduce经典例题【第一期】
大数据·mapreduce
隐于花海,等待花开2 天前
39.ROUND / FLOOR / CEIL 函数深度解析
hive·hadoop
看海的四叔3 天前
【SQL】SQL-管好你的字符串
大数据·数据库·hive·sql·数据分析·字符串
坚持就完事了3 天前
YARN资源管理器
大数据·linux·hadoop·学习