官宣!ChunJun 1.16 Release 版本发布!

亲爱的社区小伙伴们,我们很高兴地宣布,ChunJun 迎来 1.16 Release 版本的正式发布。在新版本中,ChunJun 新增了一批常用功能,进行了多项功能优化和问题修复,并在用户使用体验上进行了极大地改善。有9位Contributor 为 ChunJun 提交了多项优化和修复,感谢因为有你们才让 ChunJun 变得更好!

1、重要更新

(1)新增 Catalog 模块:本次 1.16 版本正式引入 独立的 Catalog 模块,为 Flink SQL 使用多种湖仓格式提供统一的元数据访问能力,支持 Paimon、Iceberg 等主流湖仓格式。

通过 Catalog,ChunJun 在湖仓场景下的生态能力进一步增强,Flink SQL 任务开发与管理更加统一、规范、便捷。

(2)Doris Sink 大幅性能优化:批写场景内存占用下降明显 & 性能翻倍

Doris Sink 在本版本中进行了系统性优化,包括数据缓冲区设计、批写逻辑优化。

  • 相比 1.16 Alpha 内存占用显著降低,减少频繁GC

  • 批写吞吐提升,实测性能翻倍

  • Stream Load 触发更加平滑,降低写入抖动

  • 优化异常重试机制,有效提升任务整体稳定性

(3)实时采集,kakfa支持按照主键分区写入

(4)优化 JDBC 插件,提升插件性能

(5)OceanBase插件支持mysql和oracle模式

以下为参与本次版本发布的人员名单,他们分别是(首字母排序):

2、体验地址

Github:https://github.com/DTStack/chunjun

3、社区官网:

https://dtstack.github.io/chunjun/

4、征集调研:

为了更好的规划 ChunJun 后续版本的演进方向(特别是同步任务引擎的优化、Flink内核版本稳定线的选择),现向社区用户征集调研,请大家基于实际使用情况,投出自己宝贵的一票。

👉投票地址:https://github.com/DTStack/chunjun/discussions/1965

感谢大家对ChunJun一直以来的支持,欢迎感兴趣的小伙伴前往体验新版本并且针对ChunJun未来的演进方向做出选择,让我们一起共建更好的开源生态!

相关推荐
雪碧聊技术7 小时前
Badge 应用场景与落地实践指南
大数据·人工智能
望江东浪8 小时前
我的 Claude Code 效率工具全套配置分享
大数据·elasticsearch·搜索引擎
chaoyuanl9 小时前
现有游乐设施 XR 数字化升级改造方案
大数据·科技·3d·xr·娱乐
LL334455679 小时前
创业自动化平台怎么选
大数据·人工智能
珠海西格电力10 小时前
云边端协同架构:零碳园区管理系统的技术底座
大数据·运维·人工智能·算法·架构·能源
xcLeigh11 小时前
提示词基础:什么是Prompt以及它为何如此重要
人工智能·ai·大模型·prompt·ai写作·提示词
cc57250265311 小时前
大数据专业是不是热门专业
大数据
汇策研习社11 小时前
StdDev标准差指标深度解析:量化市场波动的核心工具
大数据·经验分享·金融·区块链·fastbull
大大大大晴天12 小时前
Hudi技术内幕: Concurrency Control原理与实践
大数据
阿里云大数据AI技术13 小时前
DataWorks Data Agent 实战课堂(一):解锁你的7×24h全能“数据搭子”DataWorks AI助理!
大数据·人工智能·agent