Flink 状态精准一次性特性

Flink 的一个重大价值在于, 它既保证了 exactly-once ,也具有低延迟和高吞吐
的处理能力
1.端到端(End-To-End)状态一致性
端到端的一致性保证,意味着结果的正确性贯穿了整个流处理应用的始终;每
一个组件都保证了它自己的一致性,整个端到端的一致性级别取决于所有组件中一
致性最弱的组件.
具体划分:

  1. 内部保证 ------ 依赖 checkpoint。
    2.source 端 ------ 需要外部源可重设数据的读取位置。
    3.sink 端 ------ 需要保证从故障恢复时,数据不会重复写入外部系统
相关推荐
Florian21 小时前
Graph4Stream:基于图的流计算加速
flink·流计算·图计算·geaflow
宝哥大数据1 天前
flink 分组窗口聚合 与 窗口表值函数聚合 的区别
flink
張萠飛2 天前
Flink在双流Join中,window如何选择
大数据·flink
黄雪超3 天前
Flink介绍——实时计算核心论文之S4论文详解
大数据·论文阅读·flink
Flink_China3 天前
Flink 批处理自适应执行计划优化
flink
宝哥大数据3 天前
flink 基站与服务器长连接,每次连接和断开都会上报数据,统计过去一小时每个基站断开次数和时长
大数据·服务器·flink
十六ᵛᵃᵉ3 天前
day1_Flink基础
大数据·flink
十六ᵛᵃᵉ4 天前
day2_Flink基础
大数据·flink
十六ᵛᵃᵉ4 天前
day3_Flink基础
android·java·flink
十六ᵛᵃᵉ4 天前
day5_Flink基础
大数据·flink·linq