Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
夜焱辰6 小时前
浏览器端 Agent 的文件版本管理:不用 Git,基于 OPFS + SQLite 自己造了一个
前端·人工智能
梦想的颜色6 小时前
TypeScript 完全指南(下):从类型体操到生产级配置
前端·javascript·typescript
闹小艾6 小时前
舞蹈教培机构小程序零基础制作开发全流程教程
大数据·小程序
阿乔外贸日记6 小时前
2026尼日利亚五项清关政策更新,拉高能源装备进口综合成本
大数据·人工智能·搜索引擎·智能手机·云计算·能源
暴躁小师兄数据学院6 小时前
【AI大数据工程师特训笔记】第12讲:表分区与索引
大数据·笔记·sql·postgresql
侃谈科技圈7 小时前
破除数据中台落地困境:2026数据治理平台差异化能力与选型决策指南
大数据·人工智能
Hi~晴天大圣7 小时前
npm使用介绍
前端·npm·node.js
Elastic 中国社区官方博客7 小时前
Elasticsearch DiskBBQ:使用原生 SIMD Blocks 实现快 40% 的向量评分计算
大数据·人工智能·elasticsearch·搜索引擎·ai·全文检索·diskbbq
888CC++8 小时前
如何在 C 语言中进行程序调试?
前端·javascript·算法
暴躁小师兄数据学院8 小时前
【AI大数据工程师特训笔记】第16讲:大数据环境安装
大数据·hadoop·笔记·flink·spark·database