yarn任务筛选spark任务,判断内存/CPU使用超过限制任务

yarn任务筛选spark任务,判断内存/CPU使用超过限制任务

curl -s "http://it-cdh-node01:8088/ws/v1/cluster/apps?states=RUNNING" | jq '.apps.app | map(select(.applicationType == "SPARK" ) | select(.allocatedMB >= 102400 or .allocatedVCores >= 50) | { id, name, allocatedMB, allocatedVCores, elapsedTime })' >> /data03/jq/sparkjoblog

curl -s "http://it-cdh-node01:8088/ws/v1/cluster/apps?states=RUNNING" | jq '.apps.app | map(select(.applicationType == "SPARK" ) | select(.allocatedMB >= 102400 or .allocatedVCores >= 50) | { id, name, allocatedMB, allocatedVCores })'

curl -s "http://it-cdh-node01:8088/ws/v1/cluster/apps?states=RUNNING" | jq 'select(.apps.app[].applicationType = "SPARK") | .apps.app[].id' | xargs -I {} curl -s "http://it-cdh-node01:8088/ws/v1/cluster/apps/{}" | jq 'select(.app.allocatedMB >= 102400 or .app.allocatedVCores >= 50) | .app.id, .app.name, .app.allocatedMB, .app.allocatedVCores'

相关推荐
我命由我1234519 分钟前
React - state、state 的简写方式、props、props 的简写方式、类式组件中的构造器与 props、函数式组件使用 props
前端·javascript·react.js·前端框架·html·html5·js
EstherNi1 小时前
左右两侧定位的效果,vue3
javascript·vue.js
Rsun045511 小时前
Vue相关面试题
前端·javascript·vue.js
好名字08212 小时前
Vue2转Word方法(html-docx-js库)
javascript·html·word
冴羽2 小时前
资深前端都在用的 9 个调试偏方
前端·javascript
兆子龙3 小时前
xx.d.ts 文件有什么用,为什么不引入都能生效?
javascript
吴声子夜歌3 小时前
小程序——界面API(一)
java·javascript·小程序
兆子龙3 小时前
万字解析 OpenClaw 源码架构:从入门到精通
前端·javascript
@大迁世界3 小时前
精通 React 面试:从零到中高级
前端·javascript·react.js·面试·前端框架
lichenyang4533 小时前
虚拟 DOM、Diff 算法与 Fiber
前端·javascript·面试