flink的计时器

背景

在flink中,我们经常使用ontimer计时器实现很多逻辑的功能,常见的比如某个传感器温度增加连续超过1分钟的告警输出等,本文就来简单记录下计时器的作用

计时器

ontimer的定义

java 复制代码
public void onTimer(long timestamp, OnTimerContext ctx, Collector<O> out)

timestamp: 触发定时器的事件/处理时间戳,这个时间是register定时器时指定的那个时间

ctx: 上下文对象,通过它可以访问水位线时间戳,处理时间时间戳,当前键值等

out:主输出,注意,ontimer定时器中也可以输出记录

基本上在定时器中我们能实现的逻辑和在process主逻辑中的一样

计时器局限性

我们只能在KeyedStream上,也就是键值分区数据流上注册计时器,如果你想要在DataStream上面使用,你需要首先把DataStream转换成KeyedStream,而转换的方式可以通过实现一个返回常数值的KeySelector来创建KeyedStream,但是一旦这样做,下游的算子的并行度相当于实际变成了1,性能会受到极大的影响.

相关推荐
blue_dou1 小时前
灵活拓展能力对决:多款CRM自定义与数据互通实测
大数据·人工智能
tianxingjian20191 小时前
科技创新核心工具,TRIZ理论助力技术难题高效突破
大数据·人工智能·科技
daad7771 小时前
记录一个zmq客户端的性能调优
大数据·elasticsearch·搜索引擎
华奥系科技2 小时前
汛期城市内涝治理:智慧水务如何重塑防汛“安全感”?
大数据·运维·人工智能
Bode_20022 小时前
智能协同与绿色数字孪生舱主要功能与关键技术
大数据·人工智能·制造·碳中和
SmartBrain2 小时前
编程助手工具自动化开发对比报告:OpenSpec、Claude Code、Cursor、PI
大数据·人工智能
小赖同学啊2 小时前
可信数据空间设计
大数据
想ai抽2 小时前
Spark Executor 因节点内存超限被杀的分析与应对
大数据·性能优化·spark
就改了4 小时前
Windows Elasticsearch 完整上手教程
大数据·windows·elasticsearch
yyuuuzz4 小时前
独立站运营的几个技术层面常见问题
大数据·运维·服务器·网络·数据库·aws