Windows Pycharm 远程 Spark 开发 PySpark

一、环境版本

环境 版本
PyCharm 2024.1.2 (Professional Edition)
Ubuntu Kylin 16.04
Hadoop 3.3.5
Hive 3.1.3
Spark 2.4.0

二、Pycharm远程开发

文件-远程-开发

选择 SSH连接,连接虚拟机,选择项目目录即可远程开发

相关推荐
大厂技术总监下海3 小时前
从Hadoop MapReduce到Apache Spark:一场由“磁盘”到“内存”的速度与范式革命
大数据·hadoop·spark·开源
hui函数3 小时前
如何解决 PyCharm 控制台 pip install 报错 OSError: [Errno 18] Cross-device link 问题
ide·pycharm·pip
麦麦大数据4 小时前
F052pro 基于spark推荐的中医古籍知识图谱可视化推荐系统|spark mlib|hadoop|docker集群
docker·spark-ml·spark·知识图谱·可是还·中医推荐·ehcarts
巧克力味的桃子21 小时前
Spark 课程核心知识点复习汇总
大数据·分布式·spark
hui函数1 天前
Python系列Bug修复PyCharm控制台pip install报错:如何解决 pip install 网络报错 企业网关拦截 User-Agent 问题
python·pycharm·bug
Light601 天前
智能重构人货场:领码SPARK破解快消行业增长困局的全景解决方案
spark·数字化转型·ai大模型·智能营销·快消行业·供应链优化
arthur.dy.lee1 天前
在pycharm中使用powershell7解决conda,ohmyposh报错的问题
ide·pycharm·conda
Autumn72991 天前
【 jupyter 】PyCharm配置服务器连接jupyter
服务器·jupyter·pycharm
叫我:松哥1 天前
基于大数据和深度学习的智能空气质量监测与预测平台,采用Spark数据预处理,利用TensorFlow构建LSTM深度学习模型
大数据·python·深度学习·机器学习·spark·flask·lstm
技术宅学长2 天前
关于CLS与mean_pooling的一些笔记
人工智能·pytorch·笔记·pycharm