hdfs shell操作助记总结

目录

  • [1 Hadoop shell操作](#1 Hadoop shell操作)
    • [1.1 hadoop文件系统和local本地文件系统的交互命令](#1.1 hadoop文件系统和local本地文件系统的交互命令)
      • [1.1.1 从local到hadoop](#1.1.1 从local到hadoop)
      • [1.1.2 从hadoop到local](#1.1.2 从hadoop到local)
    • [1.2 hadoop与linex相似但不同的相关文件操作](#1.2 hadoop与linex相似但不同的相关文件操作)

1 Hadoop shell操作

最高级目录名称是 ./~/bin/hdfs dfs

1.1 hadoop文件系统和local本地文件系统的交互命令

1.1.1 从local到hadoop

复制代码
> hdfs -dfs copyFromLocal <localsrc> <hdfsdst>
> hdfs -dfs put <localsrc> <hdfsdst>
> hdfs -dfs moveFromLocal <localsrc> <hdfsdst> //会删除本地的对应文件

1.1.2 从hadoop到local

复制代码
> hdfs -dfs copyToLocal [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs get [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs getmerge [-nl] <hdfssrc> <localdst> //会将hdfs中的文件合并 

1.2 hadoop与linex相似但不同的相关文件操作

... 未完待续

相关推荐
数字新视界5 分钟前
国产化动环技术提升数据中心监控效率与安全性
大数据·人工智能·数据中心·微模块机房·模块化机房
isfox18 分钟前
MapReduce OutputFormat 解析:结果怎么从键值对变成文件
大数据
林澈在路上30 分钟前
能做DJ的AI写歌软件推荐:MELO音乐对比Suno v6
大数据·人工智能·github·音视频·音频
小羊没烦恼!1 小时前
Memory 记忆设计讨论:Agent Memory 的安全边界:权限、删除、版本与回执
java·大数据·word·powerpoint·.net
喻师傅2 小时前
Apache Hudi 概述:从 Parquet 更新难题到数据湖 Upsert
大数据·数据仓库·big data
qq29532 小时前
自然语言投研 Agent 的工程化选型:从问财式 NL2SQL 到多智能体投研社区
大数据·人工智能
一隅论数智2 小时前
数据消费主体变了:智能时代如何重构业务管理逻辑
大数据·人工智能·经验分享·笔记·学习·行业数字化
时下握今2 小时前
战略数据分析完整流程:从桌面研究、调研取证到报告落地
大数据·人工智能
用户3610588626122 小时前
Flink高级之富函数类深度剖析:执行时序、状态注册与序列化陷阱
大数据·flink
Safeploy安策数据2 小时前
密钥管理入门:从泄漏复盘看企业如何守住密钥安全底线
大数据·运维·微服务