Apache 原生 Hadoop 运维命令

Hadoop

1、检查原生hadoop和压缩库是否可用

bash 复制代码
hadoop checknative

2、打印hadoop环境的配置路径

bash 复制代码
hadoop classpath

HDFS

1、查看hdfs文件系统的状态

bash 复制代码
hdfs dfsadmin -report


2、获取安全模式的状态

bash 复制代码
hdfs dfsadmin -safemode get

安全模式下只可进行读操作

3、文件系统健康检查

bash 复制代码
hdfs fsck

YARN

1、查看 yarn 中的可用队列配额

bash 复制代码
# default队列
yarn queue -status default
# root队列
yarn queue -status root

2、查看ResourceManager的健康度(做了HA的前提下)

bash 复制代码
yarn rmadmin -checkHealth rm1
yarn rmadmin -checkHealth rm2

3、查看Yarn集群的节点状态信息

bash 复制代码
yarn node -list -all

4、提交mapreduce测试程序到yarn

bash 复制代码
yarn jar ${HADOOP_HOME}/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.2.3.jar pi 1 1
相关推荐
A-刘晨阳几秒前
工业物联网时代时序数据库选型指南:从大数据架构视角深度解析Apache IoTDB
大数据·物联网·时序数据库·iotdb
高梦轩5 分钟前
Nginx 核心功能
运维·nginx
i建模12 分钟前
Ubuntu Node.js 升级方案
linux·运维·ubuntu·node.js
码上淘金13 分钟前
避坑指南:为什么你在 `relabel_configs` 里过滤不掉指标?
运维·prometheus
2401_8322981013 分钟前
域名绑定怎么操作?服务器绑定域名失败的解决方法个人网站怎么绑定域名详细步骤教程
运维·服务器
顶点多余15 分钟前
进程:计算机世界的执行单元
linux·运维·服务器·进程
素心如月桠16 分钟前
IT-如何连接共享打印机
linux·服务器·网络
AnchorYYC22 分钟前
Docker入门
运维·docker·容器
Riemann~~25 分钟前
docker包括那些内容
运维·docker·容器
张毫洁25 分钟前
解决虚拟机ip不见的问题
linux·服务器·网络