win10安装spark

一、进入spark下载页面

连接 Downloads | Apache Spark

二、解压下载后的.tgz文件

直接解压即可

三、运行

运行bin目录下的 spark-shell.cmd

提示 Did not find winutils.exe: java.io.FileNotFoundException: java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset

解决办法

【精选】spark环境搭建window篇_windows spark_邱可爱的博客-CSDN博客

四、运行成功

五、winutils.exe 新版本hadoop没有的原因

winutils.exe 新版本hadoop没有了_mob649e81624618的技术博客_51CTO博客

相关推荐
hf20001212 小时前
零成本迁移,原地加速,成本降低60%:火花思维基于云器Lakehouse升级实践
大数据·分布式·spark·lakehouse
talen_hx29613 小时前
《零基础入门Spark》学习笔记 Day 04
大数据·笔记·学习·spark
D愿你归来仍是少年14 小时前
Apache Spark 详细讲解第 7 章:Shuffle 机制深度解析
大数据·spark·apache
Code知行合壹1 天前
Spark使用总结
大数据·分布式·spark
zhojiew1 天前
[INFRA] EMR集群中Hive和Spark集成Glue Data Catalog过程的深入分析
hive·hadoop·spark·aws·bigdata
鸿乃江边鸟3 天前
Spark DynamicJoinSelection 规则根据AQE统计信息动态调整Join策略
大数据·spark
鸿乃江边鸟3 天前
从 SortExec 的排序来谈 Spark Tungsten 计划中的缓存友好特性
大数据·spark
阿里云大数据AI技术3 天前
Celeborn 如何让 EMR Serverless Spark 的 Shuffle 舒心、放心、安心
大数据·spark
D愿你归来仍是少年3 天前
Apache Spark 第 6 章 附加篇:Tungsten 引擎深度解析
大数据·spark·apache
阿里云大数据AI技术4 天前
EMR Serverless Spark 携手 PAI/百炼,开启“SQL 即 AI”的新篇章
sql·阿里云·spark·serverless·pai