记录dinky0.6.7+flink1.14.5集成问题

先说一句mmp,这个jar包冲突搞吐我。如果有遇到math3问题需要注意少个包

看相关issue

以下为flink的lib目录

一、yarn-application和perjob模式

yarn session模式不依赖dlink-app-1.14-0.6.7-jar-with-dependencies.jar这个包,。但是yarn-application和perjob模式需要

注意dinky0.6.7版本时的**dlink-app-1.14-0.6.7-jar-with-dependencies.jar需要放置在hdfs:///dlink/jar/**目录下

同时在集群配置管理中配置好flink在hdfs上的lib目录

相关推荐
青云交2 小时前
Java 大视界 -- Java+Flink CDC 构建实时数据同步系统:从 MySQL 到 Hive 全增量同步(443)
java·mysql·flink·实时数据同步·java+flink cdc·mysql→hive·全增量同步
Jackeyzhe14 小时前
Flink源码阅读:Task数据交互
flink
面向Google编程14 小时前
Flink源码阅读:Netty通信
大数据·flink
金刚猿19 小时前
工作流调度平台 Dolphinscheduler - Standalone 单机部署 + Flink 部署【kafka消息推送、flink 消费】
大数据·flink
杂家1 天前
Hudi集成Flink
大数据·flink·eclipse
CappuccinoRose2 天前
流计算概述
python·flink·流计算·数据流·pyflink
yumgpkpm2 天前
AI评判:信创替代对Cloudera CDH CDP Hadoop大数据平台有何影响?
大数据·hive·oracle·flink·kafka·hbase·cloudera
Hello.Reader2 天前
PyFlink 向量化 UDF(Vectorized UDF)Arrow 批传输原理、pandas 标量/聚合函数、配置与内存陷阱、五种写法一网打尽
python·flink·pandas
虫小宝2 天前
导购电商平台用户行为分析系统:基于Flink的实时数据处理架构
大数据·架构·flink
驾数者2 天前
Flink SQL格式集成:JSON、Avro、Protobuf序列化详解
sql·flink·json