把本地文件上传到HDFS上操作步骤

因为条件有限,我这里以虚拟机centos为例

实验条件:我在虚拟机上创建了三台节点,部署了hadoop,把笔记本上的数据上传到hdfs中

  1. 数据打包上传到虚拟机节点上
    采用的是rz命令,可以帮我们上传数据
    没有的话可以使用命令安装yum install lrzsz
bash 复制代码
[root@node04 0007]# rz
  1. 解压
    没有解压命令可以安装yum install unzip
bash 复制代码
[root@node04 data]# unzip 0007.zip
  1. 启动hads服务
bash 复制代码
[root@node04 data]# start-dfs.sh
  1. 查看hdfs下的目录结构
bash 复制代码
[root@node04 data]# hadoop dfs -ls /
  1. 在hdfs上为我们的数据创建目录
bash 复制代码
hadoop dfs -mkdir /data
  1. 把数据放到hdfs中
bash 复制代码
hadoop dfs -put /opt/data/0007/ /data/
  1. 查看结果
    存放成功
相关推荐
阿里云大数据AI技术15 小时前
StarRocks 助力数禾科技构建实时数仓:从数据孤岛到智能决策
大数据
Lx35219 小时前
Hadoop数据处理优化:减少Shuffle阶段的性能损耗
大数据·hadoop
dessler1 天前
Hadoop HDFS-高可用集群部署
linux·运维·hdfs
武子康1 天前
大数据-99 Spark Streaming 数据源全面总结:原理、应用 文件流、Socket、RDD队列流
大数据·后端·spark
阿里云大数据AI技术2 天前
大数据公有云市场第一,阿里云占比47%!
大数据
Lx3522 天前
Hadoop容错机制深度解析:保障作业稳定运行
大数据·hadoop
T06205142 天前
工具变量-5G试点城市DID数据(2014-2025年
大数据
向往鹰的翱翔2 天前
BKY莱德因:5大黑科技逆转时光
大数据·人工智能·科技·生活·健康医疗
鸿乃江边鸟2 天前
向量化和列式存储
大数据·sql·向量化
IT毕设梦工厂2 天前
大数据毕业设计选题推荐-基于大数据的客户购物订单数据分析与可视化系统-Hadoop-Spark-数据可视化-BigData
大数据·hadoop·数据分析·spark·毕业设计·源码·bigdata