flink doris批量sink

idea maven 依赖

<dependency>

<groupId>org.apache.doris</groupId>

<artifactId>flink-doris-connector-1.11_2.12</artifactId>

<version>1.0.3</version>

</dependency>

val properties = Properties()

properties.setProperty("format", "json")

properties.setProperty("strip_outer_array", "true")

properties.setProperty("read_json_by_line", "true")

val executionOptions = DorisExecutionOptions.builder()

.setBatchSize(20000)

.setBatchIntervalMs(10000L)

.setEnableDelete(false)

.setMaxRetries(3)

.setStreamLoadProp(properties)

.build()

data.addSink(

DorisSink.sink(

executionOptions,

DorisOptions(

"host:8030",

"root",

"password",

"db.table"

)

)

)

.uid("sink-doris")

.name("数据写入doris")

相关推荐
wudl556611 小时前
flink 1.20 物化表(Materialized Tables)
大数据·flink·linq
悟能不能悟11 小时前
java的java.sql.Date和java.util.Date的区别,应该怎么使用
java·开发语言
高山上有一只小老虎12 小时前
java 正则表达式大全
java·正则表达式
_院长大人_13 小时前
设计模式-工厂模式
java·开发语言·设计模式
凌波粒13 小时前
MyBatis完整教程IDEA版(2)--ResultMap/注解/一对多/多对一/lombok/log4j
java·intellij-idea·mybatis
蓝-萧13 小时前
【玩转全栈】----Django基本配置和介绍
java·后端
priority_key13 小时前
排序算法:堆排序、快速排序、归并排序
java·后端·算法·排序算法·归并排序·堆排序·快速排序
编程社区管理员14 小时前
React 发送短信验证码和验证码校验功能组件
前端·javascript·react.js
全马必破三14 小时前
React“组件即函数”
前端·javascript·react.js
三思而后行,慎承诺14 小时前
React 底层原理
前端·react.js·前端框架