hadoop常用命令

Yarn

查看提交到资源调度器的任务(任何用yarn资源的都可以看,比如spark、tez、mapreduce)

看正在运行的yarn任务

yarn application -list

杀死对应的yarn任务

yarn application -kill {application_Id}(id可以通过-list看到)

hdfs

查看hdfs目录

hdfs dfs -ls /(查看本集群的目录)

hdfs dfs -ls hdfs://ip地址:端口号/(查看指定集群的目录,需要有相关访问权限--如互信,如票据)

查看namenode active节点

hdfs haadmin 先输入这个,然后有提示 -getServiceState

创建目录

hdfs dfs -mkdir /

统计文件大小

(-s是返回合并所有文件后结果,-h是自动转换为可见的单位,不加-h返回的是字节数)

hdfs dfs -du -s -h /目录

相关推荐
找方案2 小时前
从用户画像到智能定价:81页方案拆解“大数据决策与支撑平台”怎么落地
大数据·人工智能·数据分析·智慧城市·用户画像
liliangcsdn3 小时前
DeepSeek DeepInfer开源项目的功能分析和探索
大数据·人工智能
xiaogai_gai4 小时前
钉钉月结报销到金蝶付款单同步方案实战教程
大数据·数据库·钉钉
Elastic 中国社区官方博客5 小时前
Elasticsearch:安装自行管理的 Elastic Stack 集群
大数据·运维·服务器·数据库·elasticsearch·搜索引擎·全文检索
商业看点解说6 小时前
支持私有化部署的 AI 助手有哪些?把“私有化“拆成四层,排除一类常被错放的产品
大数据·人工智能
清华kenny6 小时前
安徽晓得养HIS系统适合哪类健康机构升级使用
大数据·人工智能·安徽晓得养
SelectDB6 小时前
数仓 TCO 怎么算:五项成本拆解框架速查
大数据·数据库·开源
戴西软件7 小时前
制造研发中的AI视觉与仿真:戴西工程图纸智能审图智能体、戴西3DViz_CAE AI集成与戴西3DViz_CAD AI集成
大数据·运维·人工智能·3d·自动化·制造·rpa
SelectDB7 小时前
高并发 BI 看板怎么撑住:隔离与加速配置速查
大数据·数据库·数据分析
Pin_Qing7 小时前
账单没超,请求先被拒了
大数据·开发语言·人工智能