spark中 write.csv时, 添加第一行的标题title

在 Spark 中使用 write.csv 写入 CSV 文件时,默认情况下是不会在文件中添加标题行的。但是,你可以通过设置 header 选项来控制是否包含标题行。

下面是一个示例:

scala 复制代码
val data = Seq(
  (1, "John", 28),
  (2, "Alice", 22),
  (3, "Bob", 32)
)

val columns = Seq("id", "name", "age")

val df = data.toDF(columns: _*)

df.write
  .options(Map("header" -> "true", "encoding" -> "UTF-8"))
  .csv("/path/to/output")
  • "header" -> "true" 添加标题
  • "encoding" -> "UTF-8" 中文

如果 header 选项设置为 false 或省略,默认情况下将不包含标题行。

请注意,header 选项适用于多种文件格式,不仅仅是 CSV。你可以使用相同的方法在其他格式(例如 Parquet、JSON 等)中添加或禁用标题。

相关推荐
靠沿22 分钟前
MySQL数据库进阶——存储过程和触发器
java·数据库·mysql
IT_陈寒1 小时前
Redis那个过期删除策略,差点让我线上崩了
前端·人工智能·后端
jianqiang.xue1 小时前
Espressif-IDE进入维护模式:乐鑫把ESP32开发的宝押给VS Code
前端·css·ide
码少女1 小时前
MySQL--库与表的增删改查基础
java·数据库·mysql
特创数字科技1 小时前
纯本地离线运行的文档脱敏工具(技术分享)
前端·驱动开发·python
心之语歌2 小时前
uni-app uts原生插件开发:uts 与 Kotlin 交互踩坑实录(附解决方案)
前端·后端
再吃一根胡萝卜2 小时前
DSH 插件数据链路:Host 管数据,Client 只管画
前端
feixing_fx2 小时前
CSS 变量(Custom Properties):构建可扩展的主题切换系统
前端·css·前端框架·html·css3
Flynt3 小时前
掘金热文说 Spring Boot 4.1 默认开虚拟线程,我实测后发现了更狠的坑
java·spring boot·性能优化
十有八七3 小时前
手搓 Agent(一):先有大脑——大模型只会做一件事
前端·人工智能·后端