Dinky中配置Flink集群

需要启动yarn-session 进程,在集群服务器

cd /pwd//flink/bin

yarn-session -d

启动成功后可以在yarn的资源管理队列进行查看

启动成功后会给出:JobManager Web Interface

在dinky中进行配置:

集群配置

Hadoop 配置:

Hadoop 配置文件路径

/opt/datasophon/hadoop-3.3.3/etc/hadoop

Flink 配置:

Flink Lib 路径:hdfs://ddp54:8020/flink-dist

Flink 配置文件路径:/opt/datasophon/flink-1.16.2/conf

提交 FlinkSQL 配置项:

Jar 文件路径:hdfs://ddp54:8020/dinky-app-1.16-1.1.0-jar-with-dependencies.jar

相关推荐
qq_433618441 小时前
shell 编程(五)
linux·运维·服务器
VVVVWeiYee1 小时前
项目2路由交换
运维·服务器·网络·网络协议·信息与通信
小伍_Five3 小时前
透视网络世界:计算机网络习题的深度解析与总结【前3章】
服务器·网络·计算机网络
小刘鸭!4 小时前
Flink中并行度和slot的关系——任务和任务槽
大数据·flink
芷栀夏4 小时前
如何在任何地方随时使用本地Jupyter Notebook无需公网IP
服务器·ide·tcp/ip·jupyter·ip
G鲲鹏展翅Y4 小时前
jupyter-lab与实验室服务器远程链接
服务器·jupyter
LI JS@你猜啊4 小时前
Elasticsearch 集群
大数据·服务器·elasticsearch
筒栗子4 小时前
复习打卡大数据篇——Hadoop HDFS 03
大数据·hadoop·hdfs
赵大仁5 小时前
在 CentOS 7 上安装 Node.js 20 并升级 GCC、make 和 glibc
linux·运维·服务器·ide·ubuntu·centos·计算机基础
vvw&5 小时前
Docker Build 命令详解:在 Ubuntu 上构建 Docker 镜像教程
linux·运维·服务器·ubuntu·docker·容器·开源