技术栈
jobmanager
XueminXu
9 个月前
flink
·
jobmanager
·
taskmanager
·
提交过程
·
执行流程
·
运行模式
·
部署模式
Flink任务提交流程和运行模式
Flink 的提交流程随着部署模式、资源管理平台的不同，会有不同的变化。这里做进一步的抽象，形成一个大概高视角的任务执行流程图，如下：
G皮T
1 年前
大数据
·
flink
·
系统架构
·
jobmanager
·
taskmanager
·
resourcemanager
【大数据】Flink 系统架构
Flink 是一个用于状态化并行流处理的分布式系统。它的搭建涉及多个进程，这些进程通常会分布在多台机器上。分布式系统需要应对的常见挑战包括 分配和管理集群计算资源，进程协调，持久且高可用的数据存储 及 故障恢复 等。