70、Flink 的 DataStream Connector 之 JDBC 连接器详解

1.概述

该连接器可以向 JDBC 数据库写入数据,添加下面的依赖以便使用该连接器(同时添加 JDBC 驱动)

复制代码
<dependency>
    <groupId>org.apache.flink</groupId>
    <artifactId>flink-connector-jdbc</artifactId>
    <version>3.1.2-1.19</version>
</dependency>

已创建的 JDBC Sink 能够保证至少一次的语义,精确一次可以通过 upsert 语句或幂等更新实现。

使用示例:

复制代码
StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

env
        .fromElements(...)
        .addSink(JdbcSink.sink(
                "insert into books (id, title, author, price, qty) values (?,?,?,?,?)",
                (ps, t) -> {
                    ps.setInt(1, t.id);
                    ps.setString(2, t.title);
                    ps.setString(3, t.author);
                    ps.setDouble(4, t.price);
                    ps.setInt(5, t.qty);
                },
                new JdbcConnectionOptions.JdbcConnectionOptionsBuilder()
                        .withUrl(getDbMetadata().getUrl())
                        .withDriverName(getDbMetadata().getDriverClass())
                        .build()));
env.execute();
相关推荐
杜清卿27 分钟前
Spark处理过程-转换算子和行动算子
大数据·分布式·spark
小冻梨!!!1 小时前
Spark,在shell中运行RDD程序
大数据·javascript·spark
IvanCodes2 小时前
五、Hive表类型、分区及数据加载
大数据·数据仓库·hive
小白的白是白痴的白2 小时前
Spark基础介绍
大数据·分布式·spark
CONTONUE2 小时前
【Spark】使用Spark集群搭建Yarn模式
大数据·分布式·spark
迪捷软件3 小时前
从概念表达到安全验证:智能驾驶功能迎来系统性规范
大数据·人工智能
CONTONUE4 小时前
Spark处理过程-转换算子和行动算子(一)
大数据·分布式·spark
计算机人哪有不疯的4 小时前
Hadoop的组成,HDFS架构,YARN架构概述
大数据·数据库·hadoop·spark
一只鹿鹿鹿4 小时前
智慧能源大数据平台建设方案(PPT)
java·大数据·数据库·能源
深蓝易网4 小时前
深度拆解!MES如何重构生产计划与排产调度全流程?
大数据·运维·人工智能·重构·架构·制造