Dinky中配置Flink集群

需要启动yarn-session 进程,在集群服务器

cd /pwd//flink/bin

yarn-session -d

启动成功后可以在yarn的资源管理队列进行查看

启动成功后会给出:JobManager Web Interface

在dinky中进行配置:

集群配置

Hadoop 配置:

Hadoop 配置文件路径

/opt/datasophon/hadoop-3.3.3/etc/hadoop

Flink 配置:

Flink Lib 路径:hdfs://ddp54:8020/flink-dist

Flink 配置文件路径:/opt/datasophon/flink-1.16.2/conf

提交 FlinkSQL 配置项:

Jar 文件路径:hdfs://ddp54:8020/dinky-app-1.16-1.1.0-jar-with-dependencies.jar

相关推荐
沧海一粟青草喂马26 分钟前
抖音批量上传视频怎么弄?抖音矩阵账号管理的专业指南
大数据·人工智能·矩阵
理智的煎蛋1 小时前
CentOS/Ubuntu安装显卡驱动与GPU压力测试
大数据·人工智能·ubuntu·centos·gpu算力
赵孝正1 小时前
GitLab 分支管理与 Push 问题全解析
大数据·elasticsearch·gitlab
嘉禾望岗5032 小时前
Yarn介绍与HA搭建
大数据·hadoop·yarn
Sweety丶╮7942 小时前
【Ansible】实施 Ansible Playbook知识点
服务器·云原生·ansible
小麦矩阵系统永久免费2 小时前
小麦矩阵系统:让短视频分发实现抖音快手小红书全覆盖
大数据·人工智能·矩阵
IT研究室3 小时前
大数据毕业设计选题推荐-基于大数据的国家药品采集药品数据可视化分析系统-Spark-Hadoop-Bigdata
大数据·hadoop·信息可视化·spark·毕业设计·数据可视化·bigdata
optiz3 小时前
细菌基因组genome二代测序数据分析
linux·运维·服务器
m0_661316233 小时前
modbus_tcp和modbus_rtu对比&移植AT-socket,modbus_tcp&杂记
服务器·网络·tcp/ip
Lx3523 小时前
Hadoop性能瓶颈分析:从JVM到磁盘IO的全链路优化
大数据·hadoop