【Hadoop】HDFS基本操作

参考:3.HDFS基本操作_哔哩哔哩_bilibili

创建目录

bash 复制代码
hadoop fs -mkdir -p /training/qiang

查看当前根目录下文件

bash 复制代码
hadoop fs -ls /
bash 复制代码
hadoop fs -ls /training/

目录授权

bash 复制代码
hadoop fs -chmod -R 777 /training/qm

777是最大权限,读写 4、2、1

上传文件

先创建文件

bash 复制代码
echo "Hello Hadoop File System" > file01

然后将文件上传到刚刚创建的目录当中。将本地文件上传到远程分布式文件系统中。

bash 复制代码
hadoop fs -put file01 /training/qm

移动文件

将文件/training/qm/file01 移动到/training/中

bash 复制代码
hadoop fs -mv /training/qm/file01 /training/

拷贝文件

bash 复制代码
hadoop fs -cp /training/file01 /training/qm/

删除文件

bash 复制代码
hadoop fs -rm /training/file01

加-R可以删除目录

下载文件

把文件/training/qm/file01下载到本地,命名为file02

bash 复制代码
hadoop fs -get /training/qm/file01 file02
相关推荐
阿里云大数据AI技术7 小时前
StarRocks x Fluss x Paimon湖流一体方案:构建秒级响应、湖流一体的实时数据引擎
大数据·人工智能
Databend8 小时前
Agent 轨迹分析与归因的数据工程实践
大数据·数据库·agent
喵个咪9 小时前
Go Wind UBA 拆解系列 - 架构总览:三服务、数据流与契约优先
大数据·后端·go
喵个咪9 小时前
Go Wind UBA 拆解系列 - 多租户与安全:两套隔离机制的边界
大数据·后端·go
喵个咪9 小时前
Go Wind UBA 拆解系列 - OLAP 与 SQL 硬核:25 个分析模型怎么落地
大数据·后端·go
喵个咪9 小时前
Go Wind UBA 拆解系列 - SDK 与采集层:从浏览器到 Kafka
大数据·后端·go
QCC产品中心13 小时前
MiniMax Agent 接入实测:企业查询、股权穿透与 UBO 识别(附 Prompt 模板)
大数据·mcp·金融/非金融
SelectDB1 天前
Apache Doris Python UDF:让 SQL 直接调用 Python 生态,支撑 Agent 时代复杂业务逻辑
大数据·数据库·python
ApacheSeaTunnel1 天前
当多表数据涌入,Apache SeaTunnel 如何巧妙化解主键冲突?
大数据·开源·数据集成·seatunnel·技术分享·数据同步
大大大大晴天4 天前
Hudi Metadata Table 与 Hive Sync (HMS)怎么选?
大数据