Flink 状态精准一次性特性

Flink 的一个重大价值在于, 它既保证了 exactly-once ,也具有低延迟和高吞吐
的处理能力
1.端到端(End-To-End)状态一致性
端到端的一致性保证,意味着结果的正确性贯穿了整个流处理应用的始终;每
一个组件都保证了它自己的一致性,整个端到端的一致性级别取决于所有组件中一
致性最弱的组件.
具体划分:

  1. 内部保证 ------ 依赖 checkpoint。
    2.source 端 ------ 需要外部源可重设数据的读取位置。
    3.sink 端 ------ 需要保证从故障恢复时,数据不会重复写入外部系统
相关推荐
viperrrrrrrrrr76 小时前
大数据学习(40)- Flink执行流
大数据·学习·flink
TDengine (老段)1 天前
TDengine 做为 FLINK 数据源技术参考手册
大数据·数据库·flink·时序数据库·tdengine·涛思数据
Leven1995272 天前
Flink(八):DataStream API (五) Join
大数据·flink
一條狗2 天前
20250120 Flink 的 缓冲区超时(Buffer Timeout)
flink
金州饿霸2 天前
Ncat: bind to :::7777: Address already in use报错问题解决
flink
苍老流年2 天前
2. Flink分区策略
android·java·flink
lingllllove2 天前
Flink CDC MySQL同步MySQL错误记录
大数据·mysql·flink
_Magic2 天前
HUDI-0.11.0 BUCKET index on Flink 特性试用
flink·hudi
一條狗2 天前
20250120 深入了解 Apache Flink 的 Checkpointing
大数据·flink·apache
星尘幻宇科技4 天前
Flink CDC解决数据库同步,异常情况下增量、全量问题
大数据·数据库·flink