一文详解pyspark常用算子与API

rdd.glom()

对rdd的数据进行嵌套,嵌套按照分区来进行

cpp 复制代码
    rdd = sc.parallelize([1, 2, 3, 4, 5, 6, 7, 8, 9], 2)
    print(rdd.glom().collect())

输出:\[1,2,3,4,5,6,7,8,9]

参考

相关推荐
用户36105886261220 小时前
Spark 核心之 Application 和 Job 原理剖析
spark
阿里云大数据AI技术2 天前
EMR Serverless Spark AI Function 的双维降本实践
人工智能·sql·spark
java1234_小锋2 天前
【免费】基于Spark实时交通流量分析与拥堵预测系统(Java版本+可视化大屏+Kafka+SpringBoot+Vue3) 锋哥原创出品,必属精品
java·大数据·spark·kafka·实时交通流量分析与拥堵预测
用户3610588626122 天前
Spark 核心之 ClusterManager 原理剖析
spark
starzy19902 天前
Spark 核心之 Driver 原理剖析
大数据·ajax·spark
用户3610588626123 天前
Spark 核心之 Client 模式提交命令和特点分析
spark
用户3610588626123 天前
Spark 核心之 YARN-Client 模式:原理、流程与源码级深度拆解
spark
风样滴男人哟4 天前
spark streaming消费rocketmq的几种方式
大数据·spark·rocketmq
用户3610588626124 天前
Spark 核心之 Standalone-Cluster 模式:原理、流程与源码级深度拆解
spark