技术栈

pyspark非安装使用graphframes

SLUMBER_PARTY_2025-06-16 12:10

pyspark版本3.1.3

需要文件

  1. graphframes-0.8.2-spark3.1-s_2.12.jar
  2. spark-graphx_2.12-3.1.3.jar
  3. 从 https://github.com/microsoft/adb2spark/raw/main/graphframes-0.8.2-py3-none-any.whl 下载graphframes-0.8.2-py3-none-any.whl。下载后把whl后缀改成zip,解压后其中一个文件夹是graphframes,直接把这个文件夹压缩成graphframes.zip
sql 复制代码
--jars graphframes-0.8.2-spark3.1-s_2.12.jar,spark-graphx_2.12-3.1.3.jar
--py-files graphframes.zip

验证是不是成功

sql 复制代码
from graghframes import GraphFrame 
上一篇:【数据可视化】Pyecharts-家乡地图
下一篇:105. Java 继承 - 静态方法的隐藏
相关推荐
不辉放弃
2 小时前
kafka的消息存储机制和查询机制
数据库·kafka·pyspark·大数据开发
不辉放弃
5 天前
kafka的shell操作
数据库·kafka·pyspark·大数据开发
不辉放弃
9 天前
spark on yarn
pyspark·大数据开发
不辉放弃
14 天前
PySpark Standalone 集群
pyspark·大数据开发
不辉放弃
14 天前
pyspark中map算子和flatmap算子
数据库·pyspark·大数据开发
不辉放弃
14 天前
PySpark 常用算子详解
pyspark·大数据开发
贝塔西塔
17 天前
PySpark中python环境打包和JAR包依赖
大数据·开发语言·python·spark·jar·pyspark
SLUMBER_PARTY_
24 天前
pyspark大规模数据加解密优化实践
pyspark·pandas_udf
SLUMBER_PARTY_
1 个月前
PySpark 使用pyarrow指定版本
pyspark
热门推荐
01Qwen3-Coder 快速上手教程 | Qwen Code + Claude Code02全球最强模型Grok4,国内已可免费使用!(附教程)03Coze 开源了,送上保姆级私有化部署方案【建议收藏】04扣子开源本地部署教程 丨Coze智能体小白喂饭级指南05KGG转MP3工具|非KGM文件|解密音频06腾讯还是太全面了,限时免费!超全CodeBuddy IDE保姆级教程!(附案例)07【手把手攻略】国家育儿补贴正式开领!一键算清你能拿多少钱?附补贴领取计算器0801-开源版COZE-字节 Coze Studio 重磅开源!保姆级本地安装教程,手把手带你体验09干翻 Typora!MilkUp:完全免费的桌面端 Markdown 编辑器!10coze 开源版本地部署及踩过的坑【喂饭级教程】