技术栈
jobmanager
XueminXu
5 个月前
flink
·
jobmanager
·
taskmanager
·
提交过程
·
执行流程
·
运行模式
·
部署模式
Flink任务提交流程和运行模式
Flink 的提交流程随着部署模式、资源管理平台的不同,会有不同的变化。这里做进一步的抽象,形成一个大概高视角的任务执行流程图,如下:
G皮T
1 年前
大数据
·
flink
·
系统架构
·
jobmanager
·
taskmanager
·
resourcemanager
【大数据】Flink 系统架构
Flink 是一个用于状态化并行流处理的分布式系统。它的搭建涉及多个进程,这些进程通常会分布在多台机器上。分布式系统需要应对的常见挑战包括 分配和管理集群计算资源,进程协调,持久且高可用的数据存储 及 故障恢复 等。