Hadoop3:Yarn常用Shell命令

一、查看任务

1、查看所有任务

bash 复制代码
yarn application -list

2、根据状态查看任务

语法

bash 复制代码
yarn application -list -appStates (所有状态:ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED)

例如

bash 复制代码
yarn application -list -appStates FINISHED

3、Kill掉Application

根据appid kill任务

bash 复制代码
yarn application -kill application_1719625561008_0003

二、查看日志

1、查询Application日志

语法

bash 复制代码
yarn logs -applicationId <ApplicationId>

案例

bash 复制代码
yarn logs -applicationId application_1719625561008_0003

2、查询Container日志

语法

bash 复制代码
yarn logs -applicationId <ApplicationId> -containerId <ContainerId>

案例

bash 复制代码
yarn logs -applicationId application_1719625561008_0003 -containerId container_1719625561008_0003_01_000001

三、查看尝试运行的任务

1、列出所有Application尝试的列表

语法

bash 复制代码
yarn applicationattempt -list <ApplicationId>

案例

bash 复制代码
yarn applicationattempt -list application_1719625561008_0003

这里我们可以查看到ContainerIdApplicationAttemptId

2、打印ApplicationAttemp状态

语法

bash 复制代码
yarn applicationattempt -status <ApplicationAttemptId>

案例

bash 复制代码
yarn applicationattempt -status appattempt_1719625561008_0003_000001

四、查看容器

1、列出所有Container

语法

bash 复制代码
yarn container -list <ApplicationAttemptId>

案例1(运行完的任务)
容器只有在任务运行的时候,才能查看到
运行结束的任务,是查看不到对应的容器的

bash 复制代码
yarn container -list appattempt_1719625561008_0003_000001

案例2(运行中的任务)

bash 复制代码
yarn container -list appattempt_1719625561008_0004_000001

2、查看Container状态

语法

bash 复制代码
yarn container -status <ContainerId>

案例

bash 复制代码
yarn container -status container_1719625561008_0003_01_000001

五、查看节点状态

1、列出所有节点

案例

bash 复制代码
yarn node -list -all

六、重新加载Yarn配置

1、更新Yarn队列相关配置

修改配置后,直接执行该命令,就可以加载最新配置,无需重启Yarn服务

对应配置文件:capacity-scheduler.xml

bash 复制代码
yarn rmadmin -refreshQueues

七、查看队列

1、查看队列状态

语法

bash 复制代码
yarn queue -status <QueueName>

案例

bash 复制代码
yarn queue -status default

页面端查看

相关推荐
阿部多瑞 ABU3 分钟前
《基于国产Linux的机房终端安全重构方案》
linux·安全
倔强的石头10637 分钟前
【Linux指南】Makefile入门:从概念到基础语法
linux·运维·服务器
ajassi200041 分钟前
linux C 语言开发 (七) 文件 IO 和标准 IO
linux·运维·服务器
程序猿编码43 分钟前
基于 Linux 内核模块的字符设备 FIFO 驱动设计与实现解析(C/C++代码实现)
linux·c语言·c++·内核模块·fifo·字符设备
一只游鱼1 小时前
Zookeeper介绍与部署(Linux)
linux·运维·服务器·zookeeper
lllsure2 小时前
【Docker】存储卷
运维·docker·容器
wheeldown2 小时前
【Linux】 存储分级的秘密
linux·运维·服务器
不做菜鸟的网工2 小时前
Headscale 的部署方法和使用教程
运维
天天进步20152 小时前
掌握React状态管理:Redux Toolkit vs Zustand vs Context API
linux·运维·react.js
艾醒(AiXing-w)2 小时前
探索大语言模型(LLM):Ollama快速安装部署及使用(含Linux环境下离线安装)
linux·人工智能·语言模型