Flink 状态精准一次性特性

Flink 的一个重大价值在于, 它既保证了 exactly-once ,也具有低延迟和高吞吐
的处理能力
1.端到端(End-To-End)状态一致性
端到端的一致性保证,意味着结果的正确性贯穿了整个流处理应用的始终;每
一个组件都保证了它自己的一致性,整个端到端的一致性级别取决于所有组件中一
致性最弱的组件.
具体划分:

  1. 内部保证 ------ 依赖 checkpoint。
    2.source 端 ------ 需要外部源可重设数据的读取位置。
    3.sink 端 ------ 需要保证从故障恢复时,数据不会重复写入外部系统
相关推荐
Hello.Reader1 天前
Flink SQL EXPLAIN “看懂计划”到“用 PLAN_ADVICE 调优”
大数据·sql·flink
语落心生1 天前
深入理解Flink与Kafka分区策略: 自定义CustomRangePartitioner详解
flink
import_random1 天前
[消息中间件]kafka+flink(实战)
flink
Hello.Reader1 天前
Flink SQL 的 TRUNCATE 用法详解(Batch 模式)
sql·flink·batch
Jackyzhe1 天前
Flink源码阅读:状态管理
大数据·flink
Jackeyzhe2 天前
Flink源码阅读:如何生成StreamGraph
flink
驾数者2 天前
Flink SQL模式识别:MATCH_RECOGNIZE复杂事件处理
数据库·sql·flink
小技工丨2 天前
【01】Apache Flink 2025年技术现状与发展趋势
大数据·flink·apache
青云交2 天前
Java 大视界 -- 基于 Java+Flink 构建实时电商交易风控系统实战(436)
java·redis·flink·规则引擎·drools·实时风控·电商交易
梦里不知身是客112 天前
flink的反压查看火焰图
大数据·flink