Windows运行Spark所需的Hadoop安装

解压文件

复制bin目录

找到winutils-master文件hadoop对应的bin目录版本

全部复制替换掉hadoop的bin目录文件

复制hadoop.dll文件

将bin目录下的hadoop.dll文件复制到System32目录下

配置环境变量

修改hadoop-env.cmd配置文件

注意jdk装在非C盘则完全没问题,如果装在C盘则需要用路径替代符:\PROGRA~1\

如 :C:\PROGRA~1\Java\jdk1.8.0_162

测试安装成功

在cmd中查看安装成功

相关推荐
JermeryBesian2 小时前
Flink系列知识讲解之:深入了解 Flink 的网络协议栈
大数据·网络协议·flink
API_Zevin3 小时前
如何优化亚马逊广告以提高ROI?
大数据·开发语言·前端·后端·爬虫·python·学习
子非鱼@Itfuture6 小时前
Spark是什么?Flink和Spark区别
java·大数据·数据仓库·python·flink·spark
念言-ny6 小时前
springboot远程链接Hadoop
hadoop·spring boot·后端
铭毅天下7 小时前
探索 INFINI Console:提升 Elasticsearch 管理效率的新利器
大数据·elasticsearch·搜索引擎·全文检索·jenkins
梦想平凡7 小时前
浅谈棋牌游戏开发流程八:运维与数据分析
大数据·elasticsearch·搜索引擎·cocos2d·源代码管理
JermeryBesian8 小时前
Flink源码解析之:Flink on k8s 客户端提交任务源码分析
大数据·flink·kubernetes
浩浩kids8 小时前
Hadoop•配置网络&克隆虚拟机
大数据·网络·hadoop
PersistJiao8 小时前
实时数仓:数据湖 + Flink当前实时数仓中非常主流且高效的方案之一
大数据·flink·实时数仓
杰克逊的日记9 小时前
SparkStreaming集群调优
大数据·分布式·spark