Dinky中配置Flink集群

需要启动yarn-session 进程,在集群服务器

cd /pwd//flink/bin

yarn-session -d

启动成功后可以在yarn的资源管理队列进行查看

启动成功后会给出:JobManager Web Interface

在dinky中进行配置:

集群配置

Hadoop 配置:

Hadoop 配置文件路径

/opt/datasophon/hadoop-3.3.3/etc/hadoop

Flink 配置:

Flink Lib 路径:hdfs://ddp54:8020/flink-dist

Flink 配置文件路径:/opt/datasophon/flink-1.16.2/conf

提交 FlinkSQL 配置项:

Jar 文件路径:hdfs://ddp54:8020/dinky-app-1.16-1.1.0-jar-with-dependencies.jar

相关推荐
中云DDoS CC防护蔡蔡10 分钟前
微信小程序被攻击怎么选择高防产品
服务器·网络安全·微信小程序·小程序·ddos
HPC_fac130520678161 小时前
以科学计算为切入点:剖析英伟达服务器过热难题
服务器·人工智能·深度学习·机器学习·计算机视觉·数据挖掘·gpu算力
yaoxin5211232 小时前
第二十七章 TCP 客户端 服务器通信 - 连接管理
服务器·网络·tcp/ip
zhixingheyi_tian4 小时前
Spark 之 Aggregate
大数据·分布式·spark
PersistJiao4 小时前
Spark 分布式计算中网络传输和序列化的关系(一)
大数据·网络·spark
sinat_384241096 小时前
使用 npm 安装 Electron 作为开发依赖
服务器
宅小海7 小时前
scala String
大数据·开发语言·scala
小白的白是白痴的白7 小时前
11.17 Scala练习:梦想清单管理
大数据
java1234_小锋7 小时前
Elasticsearch是如何实现Master选举的?
大数据·elasticsearch·搜索引擎
Kkooe8 小时前
GitLab|数据迁移
运维·服务器·git