10、Flink 动态表之动态表 & 连续查询(Continuous Query)详解

b)动态表 & 连续查询(Continuous Query)

动态表 是 Flink 的支持流数据的 Table API 和 SQL 的核心概念;与表示批处理数据的静态表不同,动态表是随时间变化的,可以像查询静态批处理表一样查询它们。

查询动态表将生成一个 连续查询 ,一个连续查询永远不会终止,结果会生成一个动态表;查询不断更新其(动态)结果表,以反映其(动态)输入表上的更改;本质上,动态表上的连续查询非常类似于定义物化视图的查询

需要注意的是,连续查询的结果在语义上总是等价于以批处理模式在输入表快照上执行的相同查询的结果

下图显示了流、动态表和连续查询之间的关系

  • 将流转换为动态表;
  • 在动态表上计算一个连续查询,生成一个新的动态表;
  • 生成的动态表被转换回流。

注意: 动态表是一个逻辑概念,在查询执行期间不一定(完全)物化动态表。

示例:单击事件流的动态表和连续查询

复制代码
[
  user:  VARCHAR,   // 用户名
  cTime: TIMESTAMP, // 访问 URL 的时间
  url:   VARCHAR    // 用户访问的 URL
]
相关推荐
幂律智能2 分钟前
穿透到合同,管控到付款
大数据·人工智能
倔强的石头10615 分钟前
连接数失控排查:从数据库会话、应用线程池到连接池泄漏
数据库·oracle
PcVue China26 分钟前
智控能耗,数驱能效 | PcVue线上研讨会进行中!
大数据·人工智能·能源·制造·直播·scada·pcvue17
恒拓高科WorkPlus30 分钟前
企业如何搭建安全内部通讯平台|企业内部通讯平台怎么选才更安全?
jvm·数据库·安全
人工智能时代 准备好了吗39 分钟前
同名实体消歧:地区、公司主体、官网和品类是关键消歧信息
大数据·人工智能
夜雪一千42 分钟前
MySQL如何限制账号权限,最小权限原则实践
数据库·mysql
头茬韭菜43 分钟前
第 02 篇:「有状态流处理范式与时间语义」—— KeyedState 的 Key Group 分配与 Watermark 对齐内核
flink
ltqvibe1 小时前
数据很脏,能不能上AI问数
大数据·人工智能·数据治理·智能问数·ai问数·本体语义·数据口径
用户3610588626121 小时前
SparkStreaming 之 Direct 模式并行度设置与 offset 管理
大数据·spark