Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
数字新视界13 小时前
动环监控系统优化数据中心管理,提升环境监测与安全效率
大数据·人工智能·数据中心·微模块机房·模块化机房
zhenaibo52113 小时前
如何向导师请教问题,才能得到有效建议?
大数据·人工智能·深度学习
Csvn13 小时前
Vue3 响应式与编译:依赖收集如何升级为节点级靶向更新
前端
生活愉甜14 小时前
森马SEMIR LAB全球首家概念店落地武康路,“WUKANG368”新地标就位
大数据·人工智能
乐迪信息14 小时前
港口船舶逆行怎么管?AI防爆摄像机搭载智能检测算法
大数据·人工智能·深度学习·算法·计算机视觉
星栈14 小时前
pnpm 12 升级实测
前端·javascript
Sirens.15 小时前
Java并发锁详解:六类锁策略与 synchronized 底层原理
java·前端·算法
和裕15 小时前
全纸结构重型纸箱能否满足 1 吨以上设备出口熏蒸豁免要求?通关合规性全解析
大数据·运维·网络·人工智能·算法
代码方舟15 小时前
零信任架构实战:基于天远运营商三要素简版V即时版查询构建自动化电子投保实名核验网关
大数据·人工智能·架构·自动化
特创数字科技16 小时前
一个纯本地运行的图片处理工具:压缩 / 裁剪 / 九宫格 / 圆角 / 滤镜 / 拼图 / 水印,终生使用
前端