【Hadoop】HDFS基本操作

参考:3.HDFS基本操作_哔哩哔哩_bilibili

创建目录

bash 复制代码
hadoop fs -mkdir -p /training/qiang

查看当前根目录下文件

bash 复制代码
hadoop fs -ls /
bash 复制代码
hadoop fs -ls /training/

目录授权

bash 复制代码
hadoop fs -chmod -R 777 /training/qm

777是最大权限,读写 4、2、1

上传文件

先创建文件

bash 复制代码
echo "Hello Hadoop File System" > file01

然后将文件上传到刚刚创建的目录当中。将本地文件上传到远程分布式文件系统中。

bash 复制代码
hadoop fs -put file01 /training/qm

移动文件

将文件/training/qm/file01 移动到/training/中

bash 复制代码
hadoop fs -mv /training/qm/file01 /training/

拷贝文件

bash 复制代码
hadoop fs -cp /training/file01 /training/qm/

删除文件

bash 复制代码
hadoop fs -rm /training/file01

加-R可以删除目录

下载文件

把文件/training/qm/file01下载到本地,命名为file02

bash 复制代码
hadoop fs -get /training/qm/file01 file02
相关推荐
得物技术12 小时前
从埋点需求到规则资产:Hermes Agent 重构得物数仓工作流
大数据·llm·ai编程
久美子13 小时前
AI驱动数仓建设的Harness工程实践——本体建模、知识分层与上下文工程
大数据
大树881 天前
金刚石散热越强,管路越先见顶
大数据·运维·服务器·人工智能·ai
大志哥1231 天前
ES和Logstash日志链路系统上线后遭遇切片爆炸(解决)
大数据·elasticsearch
果丁智能1 天前
物联网智能锁赋能集中式住宿:身份核验与远程权限管控的全链路技术实践
大数据·人工智能·物联网·智能家居
王小王-1231 天前
基于 Hive 的网易云音乐数据分析及可视化系统
hive·hadoop·数据分析·音乐数据分析·网易云音乐分析·hive音乐分析·hadoop网易云
ApacheSeaTunnel1 天前
实战演示 | 基于 Apache SeaTunnel 与 Apache DolphinScheduler 实现 MySQL 到 Doris 离线定时增量同步
大数据·mysql·开源·doris·数据集成·seatunnel·数据同步
weixin_397574091 天前
PDF复杂表格的1:1还原引擎:跨页表格自动拼接技术实战
大数据·人工智能·pdf
极光代码工作室1 天前
基于数据仓库的电商数据分析平台
大数据·hadoop·python·spark·数据可视化
秋名山码民1 天前
Graph RAG 深度解析:从向量检索到知识推理的技术演进
大数据·人工智能·rag