技术栈

自定义source

linweidong
2 个月前
大数据·flink·checkpoint·流式计算·数仓·自定义source·数据分片
Flink 自定义数据源:从理论到实践的全方位指南在 Flink 的世界里,数据源是数据流的 “源头活水”。简单来说,它负责从外部系统(比如数据库、消息队列、文件系统等)读取数据,并将其转化为 Flink 内部能够处理的格式,供后续的算子(Operator)加工。不管是实时流处理的无界数据,还是批处理的有限数据集,数据源都是那个默默干活的 “搬运工”。
阿年、嗯啊
2 年前
大数据·flink·source·从kafka中读取数据·自定义source·从hdfs中读取数据
Flink - souce算子水善利万物而不争,处众人之所恶,故几于道💦fromCollection(waterSensors)