PysparkNote006---pycharm加载spark环境

pycharm配置pyspark环境,本地执行pyspark代码

spark安装、添加环境变量不提了

  • File-Settings-Project-Project Structure-add content root
  • 添加如下两个路径
    • D:\code\spark\python\lib\py4j-0.10.7-src.zip
    • D:\code\spark\python\lib\pyspark.zip

2023-07-26 阴 于南京市江宁区

相关推荐
Python×CATIA工业智造1 小时前
Pycaita二次开发基础代码解析:几何体重命名与参数提取技术
python·pycharm·pycatia
鼠鼠我捏,要死了捏12 小时前
Spark Shuffle性能优化实践指南:提升大数据处理效率
性能优化·spark·shuffle
万粉变现经纪人12 小时前
如何解决pip安装报错ModuleNotFoundError: No module named ‘dash’问题
python·scrapy·pycharm·flask·pip·策略模式·dash
倔强青铜三18 小时前
PyCharm正在慢性死亡?VSCode碾压式逆袭!
python·pycharm·visual studio code
Dragon online1 天前
数据仓库深度探索系列:架构选择与体系构建
大数据·数据仓库·分布式·架构·spark·大数据架构·数仓架构
qinbaby1 天前
pyspark使用
spark
万粉变现经纪人2 天前
如何解决pip安装报错ModuleNotFoundError: No module named ‘plotly’问题
python·scrapy·plotly·pycharm·flask·pandas·pip
lianghaibos2 天前
解决Pycharm内存一直升高卡死、反应慢、CPU占用高
ide·python·pycharm
段ヤシ.2 天前
Windows环境下安装Python和PyCharm
开发语言·python·pycharm
不辉放弃2 天前
Spark的累加器(Accumulator)
大数据·数据库·spark