DataWorks的SQL组件使用

文章目录

一、简介

1、介绍

MaxCompute实际业务场景存在大量类似的SQL代码过程,过程中输入表和输出表的结构一致或结构类型兼容,仅名称不同。此时,组件的开发者可将该SQL过程抽象为一个SQL组件节点,将可变的输入表抽象为输入参数,可变的输出表抽象为输出参数,实现SQL代码的复用。

2、作用

组件用于将SQL过程抽象为一个SQL模板,实现SQL代码的复用。

3、限制

1、仅MaxCompute计算引擎支持使用SQL组件。

2、需具备DataWorks工作空间的开发权限,才可创建并使用组件。

二、配置使用

1、准备表数据

可参考DataWorks快速入门

2、新建 SQL 组件

sql 复制代码
INSERT OVERWRITE TABLE @@{out_table} PARTITION(dt='20250000')
SELECT *
FROM  @@{input_table};

3、配置参数验证

查询结果表

上面验证可以成功查询到写入的数据, 说明SQL组件已经配置成功

4、引用SQL组件

创建SQL组件节点来引用SQL组件

创建后选择SQL组件版本, 然后配置参数可以执行

执行成功后就可以发布到生产环境调度执行了; 类似场景读写都可以复用这个组件, 更多详情可点击参考阿里云文档

提示: 本文示例较为简单, 实际业务要编写的组件和传入的变量可能更多更复杂, 可以根据业务场景自行开发

相关推荐
云资源服务商4 小时前
解锁阿里云日志服务SLS:云时代的日志管理利器
服务器·阿里云·云计算
安 当 加 密21 小时前
多云密钥统一管理实战:CKMS对接阿里云/华为云密钥服务
数据库·阿里云·华为云
draymond71071 天前
阿里云-spring boot 接入SLS日志
阿里云
编程乐学(Arfan开发工程师)11 天前
74、单元测试-前置条件
redis·python·阿里云·单元测试·云计算·bootstrap
Elastic 中国社区官方博客11 天前
如何在 Python 中连接 Elasticsearch 并使用 Qwen3 来实现 RAG
大数据·人工智能·python·elasticsearch·搜索引擎·阿里云·全文检索
Liudef0611 天前
阿里云魔搭社区AIGC专区:中国AI创作的革命性平台
人工智能·阿里云·aigc
从零开始学习人工智能11 天前
麒麟系统上设置Firefox自动化测试环境:指定Marionette端口号
阿里云·firefox·腾讯云
云资源服务商11 天前
阿里云无影:开启云端办公娱乐新时代
阿里云·云计算
明似水12 天前
通义千问(Qwen):阿里云打造的全能AI大模型
人工智能·阿里云·云计算
你们补药再卷啦12 天前
对接支付宝,阿里云沙箱服务
阿里云