Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
智恒百亿2 小时前
一台 5090 八卡服务器怎么分给一个团队用?多模型多任务的显存分配实战
java·大数据·人工智能
shmily麻瓜小菜鸡2 小时前
TypeScript 知识点补充(第三部分:工程化与高级类型)
前端·javascript·typescript
yyk333242 小时前
大数据工具介绍
大数据
超级新零售2 小时前
服装订货会数字化:商品版本、订单状态与后续配发数据如何衔接?
大数据·小程序·企业微信
10岁的博客2 小时前
Chrome 扩展安全攻防实录:从权限模型到真实漏洞复盘
前端·chrome·安全
QianhangQianping3 小时前
WebSocket实时推送+ HTTP 定时轮询:一块大屏两套取数怎么不打架
前端·websocket·网络协议·http·低代码·架构·数据可视化
滼3 小时前
AI 数据安全面试应答框架:从大框架到小点
大数据·人工智能·安全·面试·安全架构
Eider19983 小时前
Python基础知识之并发相关-2
开发语言·前端·python
用户69371750013843 小时前
AI 能写代码,但工程架构还是应该由人来定
前端·后端
Hilaku3 小时前
前端的技术判断力是怎么练出来的?
前端·javascript·程序员