技术栈
实时数据同步
青云交
5 小时前
java
·
mysql
·
flink
·
实时数据同步
·
java+flink cdc
·
mysql→hive
·
全增量同步
Java 大视界 -- Java+Flink CDC 构建实时数据同步系统：从 MySQL 到 Hive 全增量同步（443）
嘿，亲爱的 Java 和 大数据爱好者们，大家好！我是CSDN（全区域）四榜榜首青云交！在金融、电商、物联网赛道摸爬滚打 10 余年，主导过不下 30 个实时数据同步项目。今天想和大家掏心窝子聊聊 “实时数据同步” 这个刚需场景 —— 毕竟，在如今的实时报表、实时风控、实时推荐业务中，“数据快一秒，决策准一分” 早已不是口号，而是核心竞争力。
智海观潮
6 个月前
大数据
·
flink
·
flink cdc
·
实时数据同步
如何解决Flink CDC同步时间类型字段8小时时间差的问题，以MySQL为例
在使用Flink CDC进行数据同步时，默认情况下经常会遇到时间类型的字段与实际值相差8个小时的问题。本文以MySQL为例提供解决方案，其他数据源也可以参考这类实现。
Tapdata 钛铂数据
6 个月前
mongodb
·
实时数据同步
·
实时数据平台
·
mongodb用户大会
·
localsingapore
·
mongodb集成
TapData 出席 2025 MongoDB 用户大会新加坡站，分享构建实时统一数据平台最佳实践
在近日举行的 MongoDB.local Singapore 2025 大会上，TapData 联合创始人兼首席运营官 Robin Losey 带来了《Building a Unified Real-Time Data Platform for the Enterprise》主题演讲，聚焦当下企业构建“实时统一数据平台”的迫切需求与实践案例，吸引了大量与会者关注。
ETLCloud数据集成社区
9 个月前
数据库
·
oracle
·
etl
·
实时数据同步
ETLCloud是如何通过Oracle实现CDC的？
CDC，即Change Data Capture（变更数据捕获）功能，主要针对实时数据同步和更新场景，能够实时监测数据库中的数据变化，并将发生变化的数据进行高效精准地捕获和传输，极大地提高了数据处理的效率以及系统的响应速度。
Jack_hrx
2 年前
mysql
·
flink
·
apache
·
etl
·
实时数据同步
使用Apache Flink实现实时数据同步与清洗：MySQL和Oracle到目标MySQL的ETL流程
实现数据同步的ETL（抽取、转换、加载）过程通常涉及从源系统（如数据库、消息队列或文件）中抽取数据，进行必要的转换，然后将数据加载到目标系统（如另一个数据库或数据仓库）。在这里，我们将展示如何使用Apache Flink来实现一个从MySQL或Oracle数据库抽取数据并同步到另一个MySQL数据库的ETL过程。
我是有底线的