DBSyncer:开源数据库同步利器,MySQL/Oracle/ES/SqlServer/PG/

文章目录

一、简介

1、简介

DBSyncer是一款开源的数据同步中间件,提供MySQL、Oracle、SqlServer、PostgreSQL、Elasticsearch(ES)、Kafka、File、SQL等同步场景。支持上传插件自定义同步转换业务,提供监控全量和增量数据统计图、应用性能预警等。

开源地址:https://gitee.com/ghi/dbsyncer

文档地址:https://gitee.com/ghi/dbsyncer/wikis/%E4%BB%8B%E7%BB%8D

2、安装

安装起来非常简单,详细查看文档:
https://gitee.com/ghi/dbsyncer/wikis/%E6%93%8D%E4%BD%9C%E6%89%8B%E5%86%8C/%E7%A4%BE%E5%8C%BA%E7%89%88%E5%AE%89%E8%A3%85

1、安装jdk8

2、下载社区版包 dbsyncer-xxx-bin.zip

3、启动并访问

二、使用

1、实现mysql ->mysql全量同步

(1)添加连接,添加一个源库和目标库,总共两个连接


(2)添加驱动

注意需要添加表映射关系,相关文档:
https://gitee.com/ghi/dbsyncer/wikis/%E6%93%8D%E4%BD%9C%E6%89%8B%E5%86%8C/%E6%89%B9%E9%87%8F%E9%85%8D%E7%BD%AE%E8%A1%A8%E6%98%A0%E5%B0%84%E5%85%B3%E7%B3%BB

这里我创建了源表和目标表的映射关系,字段都是一样的:

sql 复制代码
CREATE TABLE `access` (
  `id` int NOT NULL AUTO_INCREMENT,
  `name` varchar(100) DEFAULT NULL,
  PRIMARY KEY (`id`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=6000;

保存以后还得手动设置一下同步关系,这里选择全量同步

注意!映射关系填好以后一定要点击添加!直接点保存是不会保存的

(3)开始同步

执行完成后,我们看数据已经同步完成了:

2、实现mysql ->mysql增量同步

(1)复制刚才的驱动

(2)修改驱动信息,改为增量同步

(3)启动

(3)修改源表数据,查看同步情况

3、插件开发

点击插件,下面有详细的文档,这里就不多做介绍。

注意,这个包在maven仓库是没有的,需要手动引入。

这里就不做测试了,应该是能实现类似flinkcdc的功能,同步之前先把数据给截取了。

相关推荐
白帽小丑9 小时前
# 一次 MySQL DELETE 误操作的数据恢复尝试实录
数据库·mysql
Dxy123931021610 小时前
MySQL索引完整教程:创建、查看、修改、删除与日常管理
前端·javascript·mysql
冬奇Lab10 小时前
每日一个开源项目(第152篇):SAG - 用 SQL JOIN 代替 PageRank 做多跳 RAG 检索
人工智能·开源
Quincy_Freak11 小时前
信创内网数据规范实践:银河麒麟下SQLite本地数据安全管理方案
数据库·sqlite·arm·数据库管理·大数据分析·银河麒麟·aarch64
至乐活着12 小时前
MySQL索引底层原理与查询优化实战:从B+树到执行计划
mysql·b+树·查询优化·sql性能·索引原理
2601_9626838913 小时前
治理遗留系统中的“生肉 SQL”:一次用多模型协作优化慢查询的实战复盘
数据库·人工智能·sql
机智的张尼玛13 小时前
我基于 Kotlin Multiplatform 实现了一套跨平台的弱网离线同步引擎
android·开源·kotlin
酱学编程14 小时前
【从零到一实现一个 AI Agent 框架 · 第四篇】04. 任务规划:拆解复杂目标 -
服务器·网络·数据库·人工智能
shushangyun_15 小时前
2026智能采购商城系统选型指南:如何引领企业数字化采购升级
java·大数据·数据库·人工智能·机器学习
华山令狐虫16 小时前
DBAPI AI 写 SQL:支持动态 SQL 与参数占位符,自然语言一键生成
数据库·人工智能·sql·dbapi