Spark,HDFS客户端操作

hadoop客户端环境准备

找到资料包路径下的Windows依赖文件夹,拷贝hadoop-3.1.0到非中文路径(比如d:\hadoop-3.1.0)

++++打开环境变量

++++在下方系统变量中新建HADOOP_HOME环境变量,值就是保存hadoop的目录。

效果如下:

++++配置Path环境变量。

++++新建一项

++++打开电脑终端验证Hadoop环境变量是否正常

Maven的配置同上

相关推荐
bxlj_jcj14 分钟前
Flink时间窗口详解
大数据·flink
诗旸的技术记录与分享15 分钟前
Flink-1.19.0源码详解-番外补充4-JobGraph图
大数据·flink
落霞的思绪43 分钟前
使用云虚拟机搭建hadoop集群环境
大数据·hadoop·分布式
爱思德学术1 小时前
CCF发布《计算领域高质量科技期刊分级目录(2025年版)》
大数据·网络安全·自动化·软件工程
Edingbrugh.南空9 小时前
Flink自定义函数
大数据·flink
gaosushexiangji10 小时前
利用sCMOS科学相机测量激光散射强度
大数据·人工智能·数码相机·计算机视觉
无级程序员13 小时前
大数据平台之ranger与ldap集成,同步用户和组
大数据·hadoop
lifallen14 小时前
Paimon 原子提交实现
java·大数据·数据结构·数据库·后端·算法
TDengine (老段)14 小时前
TDengine 数据库建模最佳实践
大数据·数据库·物联网·时序数据库·tdengine·涛思数据