Windows运行Spark所需的Hadoop安装

解压文件

复制bin目录

找到winutils-master文件hadoop对应的bin目录版本

全部复制替换掉hadoop的bin目录文件

复制hadoop.dll文件

将bin目录下的hadoop.dll文件复制到System32目录下

配置环境变量

修改hadoop-env.cmd配置文件

注意jdk装在非C盘则完全没问题,如果装在C盘则需要用路径替代符:\PROGRA~1\

如 :C:\PROGRA~1\Java\jdk1.8.0_162

测试安装成功

在cmd中查看安装成功

相关推荐
RPA机器人就选八爪鱼6 分钟前
RPA在银行IT运维领域的应用场景与价值分析
大数据·运维·数据库·人工智能·机器人·rpa
嘉禾望岗50323 分钟前
spark算子类型
大数据·分布式·spark
CICI1314141329 分钟前
藦卡机器人:让焊接更洁净、更精准、更智能
大数据·人工智能
一直在追1 小时前
别再用 Java 多线程思维写 Python 了!Asyncio 才是 LLM 高并发的王道
大数据
短视频矩阵源码定制1 小时前
矩阵系统源头厂家
大数据·人工智能·矩阵
Linux Huang1 小时前
spring注册组件/服务无效,问题排查
大数据·服务器·数据库·spring
天竺鼠不该去劝架1 小时前
传统财务管理瓶颈:财务机器人如何提升效率
大数据·数据库·人工智能
WZGL12302 小时前
“近邻+数智”:解码智慧养老的温情答案
大数据·人工智能·科技·生活·智能家居
A3608_(韦煜粮)2 小时前
从数据沼泽到智慧引擎:现代大数据分析与应用架构全景解密
大数据·数据分析·数据治理·实时计算·数据架构·数据网格·数据湖仓
Dxy12393102162 小时前
如何基于 Elasticsearch 构建亿级相似图片搜索系统
大数据·elasticsearch·搜索引擎