Apache 原生 Hadoop 运维命令

Hadoop

1、检查原生hadoop和压缩库是否可用

bash 复制代码
hadoop checknative

2、打印hadoop环境的配置路径

bash 复制代码
hadoop classpath

HDFS

1、查看hdfs文件系统的状态

bash 复制代码
hdfs dfsadmin -report


2、获取安全模式的状态

bash 复制代码
hdfs dfsadmin -safemode get

安全模式下只可进行读操作

3、文件系统健康检查

bash 复制代码
hdfs fsck

YARN

1、查看 yarn 中的可用队列配额

bash 复制代码
# default队列
yarn queue -status default
# root队列
yarn queue -status root

2、查看ResourceManager的健康度(做了HA的前提下)

bash 复制代码
yarn rmadmin -checkHealth rm1
yarn rmadmin -checkHealth rm2

3、查看Yarn集群的节点状态信息

bash 复制代码
yarn node -list -all

4、提交mapreduce测试程序到yarn

bash 复制代码
yarn jar ${HADOOP_HOME}/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.2.3.jar pi 1 1
相关推荐
samFuB7 小时前
【数据集】国控地表水质监测数据(2021-2025年)
大数据
axihaihai7 小时前
腾讯云镜像仓库访问问题
linux·服务器·腾讯云
xuanloyer7 小时前
linux基础学习--学习bash
linux·学习·bash
happytree0017 小时前
suricata之Threads
linux
宇钶宇夕7 小时前
魏德米勒 UR20-FBC-PN-IRT-V2 从站全解析:产品特性、模块详情、接线图与地址配置指南(地址修改部分)
运维·自动化
嘻哈baby7 小时前
从零搭建家庭All-in-One服务器:300元成本实现企业级功能
运维·服务器
kyh10033811208 小时前
去水印微信小程序搭建
大数据·微信小程序·去水印·短视频去水印·去水印微信小程序
b***67648 小时前
深入解析HDFS:定义、架构、原理、应用场景及常用命令
hadoop·hdfs·架构
SaaS_Product8 小时前
企业网盘有什么用?什么是企业网盘
大数据·运维·服务器·saas
大海里的番茄8 小时前
让操作系统的远程管理更简单用openEuler+cpolar
linux·c语言·c++