Flink cdc正确打开方式(flink on yarn)

1、Flink on yarn模式下,flink cdc需要先启动yarn-session模式

yarn-session.sh -n 10 -s 2

2、启动之后进行正常测试

CREATE TABLE test1(

id INT

PRIMARY KEY(id) NOT ENFORCED

) WITH (

'connector'='oracle-cdc',

'hostname'='127.0.01',

'port'='1521',

'username'='dwd',

'password'='dwd',

'database-name'='prod',

'table-name' ='test1','schema-name'='dw'

);

select * from test1 limit 10;

3、oracle驱动缺失, on yarn缺失的jar需要拷贝到#FLINK_HOME/lib/

scp ojdbc8-21.5.0.0.jar hdfs@hadoop09:/BigData/run/flink/lib/

相关推荐
琅琊榜首202016 小时前
AI+编程实操:小说高效改编短剧的全流程指南
大数据·人工智能
lyyl啊辉16 小时前
2. Vue数据双向绑定
前端·vue.js
jiaozi_zzq16 小时前
2026年大数据与财务管理专业就业岗位全解析与进阶指南
大数据·数据分析·证书·财务
海南java第二人16 小时前
Flink运行时组件深度解析:Java工程师的架构设计与实战指南
java·大数据·flink
WJX_KOI16 小时前
保姆级教程:Apache Flink CDC(standalone 模式)部署 MySQL CDC、PostgreSQL CDC 及使用方法
java·大数据·mysql·postgresql·flink
AI实战架构笔记16 小时前
大数据预测分析在房地产行业的市场动态监测
大数据·ai
CappuccinoRose17 小时前
CSS 语法学习文档(十七)
前端·css·学习·布局·houdini·瀑布流布局·csspaintingapi
keyborad pianist17 小时前
Web开发 Day1
开发语言·前端·css·vue.js·前端框架
实时数据17 小时前
DPI深度数据包检测 监测用户浏览搜索行为 分析在线活动 频繁访问的购物网站或搜索的关键词 等判断其消费偏好
大数据·安全·big data
Never_Satisfied17 小时前
在HTML & CSS中,可能导致父元素无法根据子元素的尺寸自动调整大小的情况
前端·css·html