Windows Pycharm 远程 Spark 开发 PySpark

一、环境版本

环境 版本
PyCharm 2024.1.2 (Professional Edition)
Ubuntu Kylin 16.04
Hadoop 3.3.5
Hive 3.1.3
Spark 2.4.0

二、Pycharm远程开发

文件-远程-开发

选择 SSH连接,连接虚拟机,选择项目目录即可远程开发

相关推荐
腾讯云大数据1 小时前
AI Native数据湖的Spark+Ray一体化实践
大数据·人工智能·spark·腾讯云·腾讯云大数据
weixin_307779132 小时前
Databricks里用PySpark统计指定表和字段中各字段的空值、空字符串或零值比例
运维·数据仓库·python·spark·云计算
用户3610588626121 天前
SparkStreaming 之 updateStateByKey 算子详解及代码实现
大数据·spark
ikun_文1 天前
Django框架路由Router的使用
python·pycharm·django
澈如冬雪^2 天前
IDEA导入已经下载的jar包
pycharm·intellij-idea·jar
用户3610588626122 天前
SparkStreaming 之 transform 算子详解及代码实现
大数据·spark
qq_426003962 天前
UI自动化元素定位不到解决方案
前端·pycharm·自动化
丈剑走天涯3 天前
基于 Python 3 语法的 PyCharm 练习示例,涵盖列表操作、类型判断及数据清洗等核心知识点
windows·python·pycharm
starzy19903 天前
SparkStreaming 之 Direct 模式深度剖析
大数据·spark
JLWcai202510093 天前
树脂砂轮质保与科学存放
mongodb·zookeeper·spark·memcached·storm