Windows运行Spark所需的Hadoop安装

解压文件

复制bin目录

找到winutils-master文件hadoop对应的bin目录版本

全部复制替换掉hadoop的bin目录文件

复制hadoop.dll文件

将bin目录下的hadoop.dll文件复制到System32目录下

配置环境变量

修改hadoop-env.cmd配置文件

注意jdk装在非C盘则完全没问题,如果装在C盘则需要用路径替代符:\PROGRA~1\

如 :C:\PROGRA~1\Java\jdk1.8.0_162

测试安装成功

在cmd中查看安装成功

相关推荐
阿里云大数据AI技术11 分钟前
孩子王基于阿里云Data Agent的智能体实践:300+Agent 覆盖400+业务场景
大数据·人工智能·agent
武子康3 小时前
H3-World 扩展跳跃与开门:新动作怎样进入训练数据?
大数据·人工智能·算法
软件技术NINI4 小时前
DeepSeek 大模型落地应用实战指南
大数据·人工智能
wuyk5556 小时前
Spider-第11讲-工程化改造与可维护性
大数据·爬虫·elasticsearch·搜索引擎
墨林陌7 小时前
AI 热点日报(2026-11-16):黄仁勋或重返英伟达,华为发具身世界模型,ChatGPT Wallet打通支付
大数据
starzy19908 小时前
Structured Streaming 结构化流概述:把流数据当作一张无限增长的表
大数据·spark
wuyk5558 小时前
Spider-第12讲-asyncio异步并发爬取
大数据·爬虫·elasticsearch·搜索引擎
筑梦之人9 小时前
Elasticsearch 9.x 从入门到精通(4/7):聚合分析与文本分析
大数据·elasticsearch·jenkins
数字新视界19 小时前
信创动环监控在机房环境管理中的智能化应用与实践分析
大数据·人工智能·物联网·信息与通信·动环监控系统
大大大大晴天1 天前
数仓分层架构设计:ODS、DWD、DWS、ADS、DIM 如何各司其职
大数据