hadoop:hafs:上传文件、删除文件、改变文件权限等常用命令

Hadoop是一个开源的分布式计算框架,用于处理和分析大数据集。Hadoop提供了大量的命令来管理集群、处理数据以及执行其他相关任务。

🍀以下是一些常用的Hadoop命令的汇总:

1 启动和关闭Hadoop服务

启动所有Hadoop服务

bash 复制代码
start-all.sh

关闭所有Hadoop服务

bash 复制代码
stop-all.sh

2 HDFS文件系统命令

上传文件到HDFS

bash 复制代码
hdfs dfs -put <local_src> <hdfs_dst>

查看文件系统根目录的文件夹

bash 复制代码
hdfs dfs -ls /

显示Hadoop上的文件内容

bash 复制代码
hdfs dfs -cat <hdfs_file>

从Hadoop上获取文件到本地

bash 复制代码
hdfs dfs -get <hdfs_src> <local_dst>

在Hadoop上删除文件

bash 复制代码
hdfs dfs -rm <hdfs_file>

在Hadoop上创建目录

bash 复制代码
hdfs dfs -mkdir <hdfs_dir>

在Hadoop上创建多级目录

bash 复制代码
hdfs dfs -mkdir -p <hdfs_dir_with_subdirs>

删除目录

bash 复制代码
hdfs dfs -rm -r <hdfs_dir>

重命名文件

bash 复制代码
hdfs dfs -mv <hdfs_src> <hdfs_dst>

3 权限管理类

改变文件所属组

bash 复制代码
hdfs dfs -chgrp <group> <path>

改变文件权限

bash 复制代码
hdfs dfs -chmod [-R] <permissions> <path>
相关推荐
code_slave(码畜)1 小时前
微服务架构落地:分库分表实战(下) —— 分布式主键、跨分片查询与分页聚合防坑
数据库·spring boot·分布式·spring cloud·微服务·架构·分库分表
Francek Chen1 小时前
【大数据处理与分析】数据仓库Hive:08 Impala
数据仓库·hive·hadoop·数据分析·impala
德迅云安全-上官1 小时前
新一代智能分布式云接入:应用加速守护 TCP 业务安全与体验
分布式·tcp/ip·安全
凯凯姜2 小时前
分布式定时任务重复执行与故障恢复
分布式
人工智能培训2 小时前
边缘AI与大模型轻量化:让智能跑进每一个终端
大数据·人工智能·算法·重构·生活
产业家2 小时前
当数据走向理解,如何重构一个企业级 AI 数据平台?
大数据·人工智能
Hotchip_MEMS2 小时前
从触发吸气道智能感知:MEMS硅麦埋下雾化器智能化伏笔
大数据·人工智能·笔记·电脑·制造
北京君诺正信知识产权2 小时前
商标变更、转让、续展怎么办理?官方规则整理好了
大数据
字节跳动数据平台2 小时前
水印字幕无痕擦除!电商、短剧素材处理告别“贴膏药”
大数据
清华kenny2 小时前
中医生活化智能终端对比:晓得养在合肥周边的服务优势
大数据·人工智能·安徽晓得养