hdfs shell操作助记总结

目录

  • [1 Hadoop shell操作](#1 Hadoop shell操作)
    • [1.1 hadoop文件系统和local本地文件系统的交互命令](#1.1 hadoop文件系统和local本地文件系统的交互命令)
      • [1.1.1 从local到hadoop](#1.1.1 从local到hadoop)
      • [1.1.2 从hadoop到local](#1.1.2 从hadoop到local)
    • [1.2 hadoop与linex相似但不同的相关文件操作](#1.2 hadoop与linex相似但不同的相关文件操作)

1 Hadoop shell操作

最高级目录名称是 ./~/bin/hdfs dfs

1.1 hadoop文件系统和local本地文件系统的交互命令

1.1.1 从local到hadoop

复制代码
> hdfs -dfs copyFromLocal <localsrc> <hdfsdst>
> hdfs -dfs put <localsrc> <hdfsdst>
> hdfs -dfs moveFromLocal <localsrc> <hdfsdst> //会删除本地的对应文件

1.1.2 从hadoop到local

复制代码
> hdfs -dfs copyToLocal [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs get [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs getmerge [-nl] <hdfssrc> <localdst> //会将hdfs中的文件合并 

1.2 hadoop与linex相似但不同的相关文件操作

... 未完待续

相关推荐
Qyr9912 小时前
2026-2032直接芯片液冷板市场爆发式增长:AI算力浪潮下的热管理核心赛道
大数据·人工智能
蓝色的风-202613 小时前
国产算力双雄对决:曙光8000十万卡集群 vs 华为昇腾950超节点深度解析
大数据·人工智能·自然语言处理
泛联新安14 小时前
软件定义汽车时代,如何让AI研发“可信”?——泛联新安构建汽车企业级可信AI体系的落地路径
大数据·人工智能·安全·网络安全·汽车·漏洞挖掘·代码安全
杨云龙UP14 小时前
TDengine 3.4.2.8 Community 三节点三副本生产集群部署实战(DNode/MNode/taosAdapter/Explorer)
大数据·linux·运维·数据库·tdengine·时序库
SelectDB技术团队15 小时前
一条日志两套引擎的账:把 Elasticsearch 检索与分析合并到同一份数据的落地写法
大数据·数据库·elasticsearch·搜索引擎·全文检索·日志·apache doris
大大大大晴天15 小时前
每天认识一个组件:远端数据服务Apache Celeborn
大数据
幂律智能16 小时前
海外业务不同,合同系统该怎么建?
大数据·人工智能
Leo.yuan16 小时前
数据开发即质量检测:FineDataLink 5.0 在生产数据链路中的一体化实践
大数据
哲霖软件16 小时前
非标机械设备公司怎么做信息化?破解通用ERP水土不服难题
大数据·运维
IT毕设梦工厂16 小时前
计算机毕业设计选题推荐:基于大数据的杭州亚运会社交媒体互动数据可视化分析|毕业设计选题|计算机毕设|选题推荐|毕设指导|项目定制|源码|高质量项目
大数据·hadoop·信息可视化·数据挖掘·数据分析·课程设计·数据分析数据可视化