Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
Jackeyzhe5 分钟前
Flink源码阅读:Kafka Connector
flink
盐真卿14 分钟前
python2
java·前端·javascript
梦梦代码精33 分钟前
BuildingAI vs Dify vs 扣子:三大开源智能体平台架构风格对比
开发语言·前端·数据库·后端·架构·开源·推荐算法
seabirdssss1 小时前
《bootstrap is not defined 导致“获取配置详情失败”?一次前端踩坑实录》
前端·bootstrap·html
kgduu2 小时前
js之表单
开发语言·前端·javascript
pingao1413782 小时前
太阳总辐射传感器:能源、气象领域的关键测量工具
大数据·能源
百***78752 小时前
Grok-4.1技术深度解析:双版本架构突破与Python API快速集成指南
大数据·python·架构
谢尔登3 小时前
Vue3 响应式系统——computed 和 watch
前端·架构
愚公移码3 小时前
蓝凌EKP产品:主文档权限机制浅析
java·前端·数据库·蓝凌
Francek Chen4 小时前
【大数据基础】大数据处理架构Hadoop:01 Hadoop概述
大数据·hadoop·分布式·架构