Dinky中配置Flink集群

需要启动yarn-session 进程,在集群服务器

cd /pwd//flink/bin

yarn-session -d

启动成功后可以在yarn的资源管理队列进行查看

启动成功后会给出:JobManager Web Interface

在dinky中进行配置:

集群配置

Hadoop 配置:

Hadoop 配置文件路径

/opt/datasophon/hadoop-3.3.3/etc/hadoop

Flink 配置:

Flink Lib 路径:hdfs://ddp54:8020/flink-dist

Flink 配置文件路径:/opt/datasophon/flink-1.16.2/conf

提交 FlinkSQL 配置项:

Jar 文件路径:hdfs://ddp54:8020/dinky-app-1.16-1.1.0-jar-with-dependencies.jar

相关推荐
云资源服务商1 小时前
解锁阿里云日志服务SLS:云时代的日志管理利器
服务器·阿里云·云计算
朱包林2 小时前
day45-nginx复杂跳转与https
linux·运维·服务器·网络·云计算
随缘而动,随遇而安3 小时前
第八十八篇 大数据中的递归算法:从俄罗斯套娃到分布式计算的奇妙之旅
大数据·数据结构·算法
孞㐑¥3 小时前
Linux之Socket 编程 UDP
linux·服务器·c++·经验分享·笔记·网络协议·udp
GISer_Jing4 小时前
Git协作开发:feature分支、拉取最新并合并
大数据·git·elasticsearch
柳鲲鹏5 小时前
WINDOWS最快布署WEB服务器:apache2
服务器·前端·windows
IT_10245 小时前
Spring Boot项目开发实战销售管理系统——系统设计!
大数据·spring boot·后端
一只鹿鹿鹿7 小时前
信息化项目验收,软件工程评审和检查表单
大数据·人工智能·后端·智慧城市·软件工程
bcbobo21cn7 小时前
初步了解Linux etc/profile文件
linux·运维·服务器·shell·profile
聚铭网络8 小时前
案例精选 | 某省级税务局AI大数据日志审计中台应用实践
大数据·人工智能·web安全