- 间隔联结只支持事件时间
- 间隔联结如果遇到迟到数据,则会关联不上,比如来了一个5秒的数据,它可以关联前2秒的数据,后3秒的数据,就是可以关联3秒到8秒的数据,然后又来了一个6秒的数据,可以关联4秒到9秒的数据,那么3秒的数据,就永远不会被关联到了,就可以删除了,然后又来了一个迟到数据,比如4秒的数据,可以关联2秒到7秒的数据,但是3秒的数据已经被删除了,所以就关联不上了。对于这种情况,解决办法就是,使用回撤流,比如left join,left join可以设置状态过期时间,这个时间是系统时间,比如我们设置过期时间是5分钟,那么A流的3秒的数据,可以和B流的4秒(迟到数据)的数据关联上,就解决了这个问题。
Flink-间隔联结
青云游子2023-08-10 12:51
相关推荐
用户3610588626123 小时前
SparkStreaming 之 updateStateByKey 算子详解及代码实现咖啡屋和酒吧5 小时前
“隐性肩颈紧张”正在透支精力|没有酸痛,不代表肩颈处于健康状态港股研究社5 小时前
专注履约底座,顺丰同城在即时零售效率时代提升增长动能AI_yangxi7 小时前
短视频矩阵系统选哪家lupai15 小时前
手机在网状态接口实测效果与质量评估大模型丫丫18 小时前
Hermes Agent:轻量级智能体框架实战指南大大大大晴天18 小时前
每天认识一个组件:SQL网关Apache Kyuubi2601_9622184719 小时前
万象生鲜系统冷链物联网接入技术实现生鲜企业温控管理数字化2601_9620748120 小时前
大数据-264 实时数仓 - Canal MySQL的binlog研究 存储目录 变动信息 配置MySQL2601_9620738120 小时前
大数据-240 离线数仓 - 广告业务 测试 ADS层数据加载 DataX数据导出到 MySQL