Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
yueyin1234561 小时前
MySQL 批量插入详解:快速提升大数据导入效率的实战方法
大数据·数据库·mysql
星火开发设计2 小时前
模板参数:类型参数与非类型参数的区别
java·开发语言·前端·数据库·c++·算法
海兰2 小时前
Elasticsearch 9.3.0 RAG Playground 指南
大数据·elasticsearch·搜索引擎
AI周红伟2 小时前
周红伟:智能体构建,《企业智能体构建-DIFY+COZE+Skills+RAG和Agent能体构建案例实操》
大数据·人工智能
代码匠心3 小时前
从零开始学Flink:Flink 双流 JOIN 实战详解
大数据·flink·flink sql·大数据处理
SQL必知必会4 小时前
使用 SQL 实现帕累托原则(80/20 法则)
大数据·数据库·sql
cc.ChenLy4 小时前
【CSS进阶】毛玻璃效果与代码解析
前端·javascript·css
何中应4 小时前
使用Jenkins部署前端项目(Vue)
前端·vue.js·jenkins
3秒一个大4 小时前
JWT 登录:原理剖析与实战应用
前端·http·代码规范