Flink 状态精准一次性特性

Flink 的一个重大价值在于, 它既保证了 exactly-once ,也具有低延迟和高吞吐
的处理能力
1.端到端(End-To-End)状态一致性
端到端的一致性保证,意味着结果的正确性贯穿了整个流处理应用的始终;每
一个组件都保证了它自己的一致性,整个端到端的一致性级别取决于所有组件中一
致性最弱的组件.
具体划分:

  1. 内部保证 ------ 依赖 checkpoint。
    2.source 端 ------ 需要外部源可重设数据的读取位置。
    3.sink 端 ------ 需要保证从故障恢复时,数据不会重复写入外部系统
相关推荐
橙子qyfftf13 小时前
深度了解flink(七) JobManager(1) 组件启动流程分析
大数据·flink
任错错17 小时前
flinksql-Queries查询相关实战
大数据·数据库·mysql·flink·flinksql
mqiqe1 天前
FLINK 合流
大数据·flink
橙子qyfftf1 天前
深度了解flink rpc机制(四) 组件启动流程源码分析
大数据·rpc·flink
橙子qyfftf2 天前
深度了解flink 运行时架构
大数据·架构·flink
hai405872 天前
Flink + Kafka 实现通用流式数据处理详解
大数据·flink·kafka
橙子qyfftf2 天前
深度了解flink Flink 本地运行Standalone模式
大数据·flink
程序届的悟空2 天前
【flink】之集成mybatis对mysql进行读写
大数据·flink
大数据之家2 天前
ds 启动flink 任务报错
大数据·flink
程序员爱中国2 天前
Flink(一)
大数据·flink