Spark云计算平台Databricks使用,SQL

创建workspace:Spark云计算平台Databricks使用,创建workspace和Compute计算集群(Spark集群)-CSDN博客

1 创建schema

选择Calalog,点击Create schema

输入名字,Storage location选择workspace,数据都是保存在AWS S3云存储

2 创建Table

选择test,Create -> Create table

点击browse,本地上传people.json文件

bash 复制代码
[
    {"name":"Michael", "age":28},
    {"name":"Andy", "age":30},
    {"name":"Justin", "age":19}
]

点击Create table

创建成功

3 SQL

4 scala查询Table

如何运行Scala程序:Spark云计算平台Databricks使用,第一个scala程序-CSDN博客

Scala代码

Scala 复制代码
var sqlDF = spark.sql("SELECT * FROM test.people")
sqlDF.show()

运行

相关推荐
virtaitech1 小时前
算力浪费与算力饥渴并存,OrionX社区版免费开放能否破解这一困局?
大数据·人工智能·gpu算力
青春万岁!!2 小时前
hive模型数据异常-作业调度问题
大数据·数据仓库·hive
QYR-分析2 小时前
压力电气转换器行业市场现状与发展前景分析
大数据·人工智能
人机与认知实验室2 小时前
人机协同的命门:权限与信任
大数据·人工智能
QEasyCloud20225 小时前
领星、聚水潭与金蝶云星空三方系统对接技术方案
大数据
江瀚视野5 小时前
DeepWay深向盈利拐点趋近意味着什么?
大数据·人工智能
Bechamz5 小时前
大数据开发学习Day31
大数据·学习·ajax
闵孚龙6 小时前
Claude Code Plan Mode 计划模式全解析:先规划后执行、审批流、计划文件、Auto Mode、多 Agent 协同
大数据·人工智能
财迅通Ai7 小时前
利欧股份科技股权投资成效显著 构建硬科技布局新生态
大数据·人工智能·科技·利欧股份
API快乐传递者7 小时前
深度解析得物详情接口 dewu.item_get_app:技术实现、实操落地与风控规避
大数据