hadoop:hafs:上传文件、删除文件、改变文件权限等常用命令

Hadoop是一个开源的分布式计算框架,用于处理和分析大数据集。Hadoop提供了大量的命令来管理集群、处理数据以及执行其他相关任务。

🍀以下是一些常用的Hadoop命令的汇总:

1 启动和关闭Hadoop服务

启动所有Hadoop服务

bash 复制代码
start-all.sh

关闭所有Hadoop服务

bash 复制代码
stop-all.sh

2 HDFS文件系统命令

上传文件到HDFS

bash 复制代码
hdfs dfs -put <local_src> <hdfs_dst>

查看文件系统根目录的文件夹

bash 复制代码
hdfs dfs -ls /

显示Hadoop上的文件内容

bash 复制代码
hdfs dfs -cat <hdfs_file>

从Hadoop上获取文件到本地

bash 复制代码
hdfs dfs -get <hdfs_src> <local_dst>

在Hadoop上删除文件

bash 复制代码
hdfs dfs -rm <hdfs_file>

在Hadoop上创建目录

bash 复制代码
hdfs dfs -mkdir <hdfs_dir>

在Hadoop上创建多级目录

bash 复制代码
hdfs dfs -mkdir -p <hdfs_dir_with_subdirs>

删除目录

bash 复制代码
hdfs dfs -rm -r <hdfs_dir>

重命名文件

bash 复制代码
hdfs dfs -mv <hdfs_src> <hdfs_dst>

3 权限管理类

改变文件所属组

bash 复制代码
hdfs dfs -chgrp <group> <path>

改变文件权限

bash 复制代码
hdfs dfs -chmod [-R] <permissions> <path>
相关推荐
小辉懂编程几秒前
Spark sql 常用时间函数 to_date ,datediff
大数据·sql·spark
武子康12 小时前
大数据-184 Elasticsearch Doc Values 机制详解:列式存储如何支撑排序/聚合/脚本
大数据·后端·elasticsearch
expect7g12 小时前
Paimon源码解读 -- Compaction-8.专用压缩任务
大数据·后端·flink
良策金宝AI14 小时前
从CAD插件到原生平台:工程AI的演进路径与智能协同新范式
大数据·人工智能
康实训15 小时前
智慧老年实训室建设核心方案
大数据·实训室·养老实训室·实训室建设
min18112345615 小时前
分公司组织架构图在线设计 总部分支管理模板
大数据·人工智能·信息可视化·架构·流程图
周杰伦_Jay15 小时前
【Elasticsearch】核心概念,倒排索引,数据操纵
大数据·elasticsearch·搜索引擎
cai_cai015 小时前
springAlibaba + ollama + es 完成RAG知识库功能
大数据·elasticsearch·搜索引擎
Cx330❀15 小时前
Git 分支管理完全指南:从基础到团队协作
大数据·git·搜索引擎·全文检索