Flink2支持提交StreamGraph到Flink集群

  1. 最近研究Flink源码的时候,发现Flink已经支持提交StreamGraph到集群了,替换掉了原来的提交JobGraph。
    新增ExecutionPlan接口,将JobGraph和StreamGraph作为实现。

Flink集群Dispatcher也进行了修改,从JobGraph改成了接口ExecutionPlan,以支持StreamGraph的提交。

  1. Flink2还移除了Per-Job的部署模式。

  2. flink run-application 脚本命令已经不再使用,改成了 flink run yarn-application或者flink run kubernetes-application。execution.target

相关推荐
青云交1 小时前
Java 大视界 -- 基于 Java 的大数据实时流处理在能源行业设备状态监测与故障预测中的应用
flink·lstm·设备状态监测·故障预测·实时流处理·java 大数据·能源行业
唐兴通个人2 小时前
人工智能Deepseek医药AI培训师培训讲师唐兴通讲课课程纲要
大数据·人工智能
梦里不知身是客112 小时前
spark读取table中的数据【hive】
大数据·hive·spark
赞奇科技Xsuperzone4 小时前
DGX Spark 实战解析:模型选择与效率优化全指南
大数据·人工智能·gpt·spark·nvidia
努力成为一个程序猿.4 小时前
Flink集群部署以及作业提交模式详解
大数据·flink
努力成为一个程序猿.4 小时前
【Flink】FlinkSQL-动态表和持续查询概念
大数据·数据库·flink
更深兼春远5 小时前
Spark on Yarn安装部署
大数据·分布式·spark
DolphinScheduler社区5 小时前
真实迁移案例:从 Azkaban 到 DolphinScheduler 的选型与实践
java·大数据·开源·任务调度·azkaban·海豚调度·迁移案例
zhangkaixuan4566 小时前
Apache Paimon 写入流程
java·大数据·apache·paimon