Dinky中配置Flink集群

需要启动yarn-session 进程,在集群服务器

cd /pwd//flink/bin

yarn-session -d

启动成功后可以在yarn的资源管理队列进行查看

启动成功后会给出:JobManager Web Interface

在dinky中进行配置:

集群配置

Hadoop 配置:

Hadoop 配置文件路径

/opt/datasophon/hadoop-3.3.3/etc/hadoop

Flink 配置:

Flink Lib 路径:hdfs://ddp54:8020/flink-dist

Flink 配置文件路径:/opt/datasophon/flink-1.16.2/conf

提交 FlinkSQL 配置项:

Jar 文件路径:hdfs://ddp54:8020/dinky-app-1.16-1.1.0-jar-with-dependencies.jar

相关推荐
程序员清风3 小时前
数据处理脚本工程化:日志、配置、命令行与测试
服务器·开发语言·数据库
CarIise4 小时前
SpringMVC 异常处理与拦截器
大数据·spring
yyuuuzz4 小时前
跨境站点日志时区混乱的排查记录
运维·服务器·网络·云计算·aws·1024程序员节
橙露6 小时前
git简明教程以及资源分享
大数据·git
数字新视界6 小时前
一体化机柜在数据中心运维中的创新应用与优势分析
大数据·服务器·数据库·动环监控系统·动力与环境监控系统
FinelyYang6 小时前
考试系统简答题 AI 阅卷:覆盖度驱动、异步评分与人机协同落地实践
java·大数据·人工智能
SelectDB7 小时前
从 StarRocks 走向 Apache Doris:如何实现引擎平滑替换与架构升级?
大数据·数据库·数据分析
运维行者_7 小时前
网络监控工具怎么选?从设备监控到智能运维的能力清单
运维·服务器·开发语言·网络·人工智能·支持向量机·php
2401_868534787 小时前
陈冲2026年上海纽约大学全英文毕业演讲
服务器·网络
大大大大晴天7 小时前
每天认识一个组件:JanusGraph
大数据