hadoop 集群的常用命令

查看HDFS目录内容

hadoop fs -ls /path

创建目录

hadoop fs -mkdir /path/to/dir

上传本地文件到HDFS

hadoop fs -put localfile /hdfs/path

下载HDFS文件到本地

hadoop fs -get /hdfs/path localfile

查看文件内容

hadoop fs -cat /hdfs/path/file

删除文件/目录

hadoop fs -rm /hdfs/path/file

hadoop fs -rm -r /hdfs/path/dir

查看文件大小

hadoop fs -du -h /hdfs/path

启动HDFS

start-dfs.sh

停止HDFS

stop-dfs.sh

启动YARN

start-yarn.sh

查看集群节点状态

hdfs dfsadmin -report

查看正在运行的Job

yarn application -list

杀死某个Job

yarn application -kill <application_id>

检查HDFS空间使用情况

hadoop fs -df -h

检查文件块信息

hadoop fsck /path -files -blocks

相关推荐
程序员果子21 小时前
Kafka 深度剖析:架构演进、核心概念与设计精髓
大数据·运维·分布式·中间件·架构·kafka
isfox1 天前
Hadoop RPC深度解析:分布式通信的核心机制
大数据
猎板PCB黄浩1 天前
PCB 半固化片:被忽视的成本控制关键,猎板的技术选型与安全适配策略
大数据·网络·人工智能
stjiejieto1 天前
从工具到生产力:2025 年 “人工智能 +” 的产业落地全景与价值重构
大数据·人工智能·重构
说私域1 天前
基于定制开发开源AI智能名片S2B2C商城小程序的文案信息传达策略研究
大数据·人工智能·小程序
深蓝易网1 天前
3C电子企业柔性制造转型:如何通过MES管理系统实现快速换线与弹性生产?
大数据·运维·人工智能·重构·制造
IT毕设梦工厂1 天前
大数据毕业设计选题推荐-基于大数据的全国饮品门店数据可视化分析系统-Hadoop-Spark-数据可视化-BigData
大数据·hadoop·信息可视化·spark·毕业设计·源码·bigdata
亚林瓜子1 天前
AWS中的离线计算(大数据大屏项目)
大数据·hadoop·sql·spark·云计算·aws
武子康1 天前
大数据-110 Flink 安装与部署指南 支持 Local/Standalone/YARN 的多种模式
大数据·后端·flink
zskj_qcxjqr1 天前
数字大健康崛起:艾灸机器人重构就业生态,传统与科技如何共生?
大数据·人工智能·科技·机器人