Spark云计算平台Databricks使用,SQL

创建workspace:Spark云计算平台Databricks使用,创建workspace和Compute计算集群(Spark集群)-CSDN博客

1 创建schema

选择Calalog,点击Create schema

输入名字,Storage location选择workspace,数据都是保存在AWS S3云存储

2 创建Table

选择test,Create -> Create table

点击browse,本地上传people.json文件

bash 复制代码
[
    {"name":"Michael", "age":28},
    {"name":"Andy", "age":30},
    {"name":"Justin", "age":19}
]

点击Create table

创建成功

3 SQL

4 scala查询Table

如何运行Scala程序:Spark云计算平台Databricks使用,第一个scala程序-CSDN博客

Scala代码

Scala 复制代码
var sqlDF = spark.sql("SELECT * FROM test.people")
sqlDF.show()

运行

相关推荐
志栋智能1 小时前
智能巡检自动化解决方案:从“人海战术”到“AI智巡”的效能革命
大数据·运维·人工智能·网络安全·云原生·自动化
志栋智能1 小时前
AI驱动的带内自动化巡检:编织IT生态的“智慧神经网络”
大数据·运维·网络·人工智能·神经网络·自动化
能源系统预测和优化研究1 小时前
【原创改进代码】考虑电动汽车移动储能特性的多区域电网功率波动平抑优化调控
大数据·算法·能源
加速财经1 小时前
WEEX BUILDERS阿姆斯特丹站落幕:真实市场环境下的AI 量化实践探索
大数据·人工智能
一苓二肆1 小时前
Git 常用指令总结(工程实战版)
大数据·git·elasticsearch
1688red1 小时前
利用Logstash将MySQL/MairaDB 数据导入或同步到 Elasticsearch
大数据·elasticsearch·搜索引擎
切糕师学AI1 小时前
成本治理(Cloud Cost Governance)是什么?
云原生·云计算
智慧化智能化数字化方案1 小时前
企业数字化转型:战略、路径与实施指南
大数据·企业数字化转型·企业数字化转型战略路径·企业数字化转型实施指南
zlp19922 小时前
Flink DataStream 写入Starrocks实践
大数据·flink
岁岁种桃花儿2 小时前
Flink从入门到上天系列第七篇:Flink的DataStream API的运行环境
大数据·flink