Flink2支持提交StreamGraph到Flink集群

  1. 最近研究Flink源码的时候,发现Flink已经支持提交StreamGraph到集群了,替换掉了原来的提交JobGraph。
    新增ExecutionPlan接口,将JobGraph和StreamGraph作为实现。

Flink集群Dispatcher也进行了修改,从JobGraph改成了接口ExecutionPlan,以支持StreamGraph的提交。

  1. Flink2还移除了Per-Job的部署模式。

  2. flink run-application 脚本命令已经不再使用,改成了 flink run yarn-application或者flink run kubernetes-application。execution.target

相关推荐
G皮T43 分钟前
【Elasticsearch】自定义评分检索
大数据·elasticsearch·搜索引擎·查询·检索·自定义评分·_score
搞笑的秀儿4 小时前
信息新技术
大数据·人工智能·物联网·云计算·区块链
SelectDB4 小时前
SelectDB 在 AWS Graviton ARM 架构下相比 x86 实现 36% 性价比提升
大数据·架构·aws
二二孚日5 小时前
自用华为ICT云赛道Big Data第五章知识点-Flume海量日志聚合
大数据·华为
二二孚日7 小时前
自用华为ICT云赛道Big Data第四章知识点-Flink流批一体分布式实时处理引擎
大数据·华为
xufwind7 小时前
spark standlone 集群离线安装
大数据·分布式·spark
AI数据皮皮侠8 小时前
中国区域10m空间分辨率楼高数据集(全国/分省/分市/免费数据)
大数据·人工智能·机器学习·分类·业界资讯
DeepSeek大模型官方教程9 小时前
NLP之文本纠错开源大模型:兼看语音大模型总结
大数据·人工智能·ai·自然语言处理·大模型·产品经理·大模型学习
大数据CLUB10 小时前
基于spark的奥运会奖牌变化数据分析
大数据·hadoop·数据分析·spark
Edingbrugh.南空11 小时前
Hadoop高可用集群搭建
大数据·hadoop·分布式