hdfs shell操作助记总结

目录

  • [1 Hadoop shell操作](#1 Hadoop shell操作)
    • [1.1 hadoop文件系统和local本地文件系统的交互命令](#1.1 hadoop文件系统和local本地文件系统的交互命令)
      • [1.1.1 从local到hadoop](#1.1.1 从local到hadoop)
      • [1.1.2 从hadoop到local](#1.1.2 从hadoop到local)
    • [1.2 hadoop与linex相似但不同的相关文件操作](#1.2 hadoop与linex相似但不同的相关文件操作)

1 Hadoop shell操作

最高级目录名称是 ./~/bin/hdfs dfs

1.1 hadoop文件系统和local本地文件系统的交互命令

1.1.1 从local到hadoop

复制代码
> hdfs -dfs copyFromLocal <localsrc> <hdfsdst>
> hdfs -dfs put <localsrc> <hdfsdst>
> hdfs -dfs moveFromLocal <localsrc> <hdfsdst> //会删除本地的对应文件

1.1.2 从hadoop到local

复制代码
> hdfs -dfs copyToLocal [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs get [-ignorecrc] [-crc] <hdfssrc> <localdst>
> hdfs -dfs getmerge [-nl] <hdfssrc> <localdst> //会将hdfs中的文件合并 

1.2 hadoop与linex相似但不同的相关文件操作

... 未完待续

相关推荐
AWS官方合作商11 分钟前
AWS Bedrock:开启企业级生成式AI的钥匙【深度解析】
大数据·人工智能·aws
Flink_China1 小时前
Lalamove基于Flink实时湖仓演进之路
大数据·flink
阿里云大数据AI技术2 小时前
DataWorks智能体Agent发布!基于MCP实现数据开发与治理自动化运行
大数据·mcp
朱阿朱2 小时前
大数据Hadoop(MapReduce)
大数据·hadoop·mapreduce
炒空心菜菜2 小时前
spark数据清洗案例:流量统计
大数据·分布式·spark
用户199701080182 小时前
深入研究:京东图片搜索商品 API 详解
大数据·爬虫·数据挖掘
sunxunyong3 小时前
hive/doris查询表的创建和更新时间
数据仓库·hive·hadoop
Wnq100724 小时前
具身机器人中AI(DEEPSEEK)与PLC、驱动器协同发展研究:突破数据困境与指令精确控制(3)
大数据·人工智能·程序员·机器人·aigc·ai编程·智能电视
一个天蝎座 白勺 程序猿6 小时前
大数据(7.3)Kafka量子安全加密实践指南:构建抗量子计算攻击的消息系统
大数据·安全·kafka·量子计算
结冰架构6 小时前
【AI提示词】Emoji风格排版艺术与设计哲学
大数据·人工智能·ai·提示词