技术栈
自定义source
linweidong
7 天前
大数据
·
flink
·
checkpoint
·
流式计算
·
数仓
·
自定义source
·
数据分片
Flink 自定义数据源:从理论到实践的全方位指南
在 Flink 的世界里,数据源是数据流的 “源头活水”。简单来说,它负责从外部系统(比如数据库、消息队列、文件系统等)读取数据,并将其转化为 Flink 内部能够处理的格式,供后续的算子(Operator)加工。不管是实时流处理的无界数据,还是批处理的有限数据集,数据源都是那个默默干活的 “搬运工”。
阿年、嗯啊
2 年前
大数据
·
flink
·
source
·
从kafka中读取数据
·
自定义source
·
从hdfs中读取数据
Flink - souce算子
水善利万物而不争,处众人之所恶,故几于道💦fromCollection(waterSensors)