黑马python(二十五)

目录:

1.数据输出-输出为Python对象

2.数据输出-输出到文件中

3.综合案例

1.数据输出-输出为Python对象

2.数据输出-输出到文件中

移动文件到文件夹:

生成了好多文件,因为Rdd是有分区的 ,会把数据分散到各个分区去存储,因为电脑是16核,默认给了16个分区,有的分区有数据,有的没数据,12345默认随机分散到随机一个分区

我想生成到一个分区里:

第二种方式,设置分区为1:

3.综合案例

以反斜杠分割

取0号元素,切片取前两个元素

变成2元元组:

进行分组聚合:

进行排序:

取前3:

\代表换行

简化代码:

2:

以反斜杠分割

取2号元素:

变成2元元组

进行分组聚合:

进行排序:

取前3:

以反斜杠分割

过滤元素:

以小时为key变成二元元组

进行分组聚合:

进行排序:

取第一个元素:

以反斜杠分割

变成字典:

写出到文件:

设置分区:

相关推荐
水月清辉几秒前
利用python生成一个终极复杂动画:跳动小红心 ✨
开发语言·python
小菜鸡桃蛋狗1 分钟前
C++——类和对象(中)
开发语言·c++
暮光6294 分钟前
通过python启动参数配置ros参数
开发语言·python
chushiyunen5 分钟前
python轻量级框架flask、做桌面小程序
python·小程序·flask
毕设源码-朱学姐10 分钟前
【开题答辩全过程】以 基于java的书店用户管理系统的设计与实现为例,包含答辩的问题和答案
java·开发语言
kyle~14 分钟前
C++--- dlsym 调用封装好的算法动态库的核心工具 <dlfcn.h>
开发语言·c++·算法
qwehjk200815 分钟前
使用Seaborn绘制统计图形:更美更简单
jvm·数据库·python
一晌小贪欢15 分钟前
Python办公自动化指南:Pandas与Openpyxl的全面比较与选择
开发语言·python·pandas·python基础·python入门·python小白
于先生吖18 分钟前
2026 新版上门回收系统源码 JAVA 同城服务平台搭建指南
java·开发语言
MX_935928 分钟前
Spring整合Web环境实现思路
java·开发语言·后端·spring