Navicat 全量&增量数据库迁移

在使用 Navicat 进行数据库迁移时，除了常见的"全量迁移 "（一次性迁移所有数据和结构），有时还需要支持 增量迁移（只迁移新增或修改的数据）。下面我将详细讲解如何通过 Navicat 实现：

---

🔄 一、什么是全量迁移 vs 增量迁移

类型	含义	适用场景
全量迁移	将源数据库的全部数据和结构复制到目标数据库	初次迁移、环境重建
增量迁移	只迁移自上次迁移后发生变化的数据	日常同步、灾备备份

---

✅ 二、Navicat 支持的迁移方式

🔹 1. 全量迁移（完整传输）

• 使用 Navicat 的 传输功能 或 导出/导入 SQL 文件
• 适合初次迁移或重建数据库

🔹 2. 增量迁移（部分迁移 / 数据同步）

• 需要手动设置触发条件（如时间戳字段）
• 或者结合 Navicat 的比较工具 + 自动任务 实现定期同步
• 也可以借助 ETL 工具 或 脚本 + Navicat 调用

---

🚀 三、实现全量 + 增量迁移的方法

---

🟢 方法一：使用 Navicat 的"传输"功能进行全量迁移

步骤如下：

1. 打开 Navicat，连接好源数据库和目标数据库。
2. 右键点击源数据库 → 传输。
3. 设置源数据库和目标数据库。
4. 在"对象类型"中选择：
   • 表结构
   • 数据
   • 视图、存储过程等
5. 点击"开始"，等待迁移完成。

⚠️ 注意：这是一次性的全量迁移，不会自动处理后续的增量数据。

---

🟡 方法二：手动实现增量迁移（推荐）

✅ 前提条件：

• 源数据库中有记录更新时间的字段（如 updated_at 或 last_modified）
• 目标数据库需要支持插入/更新操作
• 可以通过 SQL 查询筛选出增量数据

✅ 实现步骤：

1. 添加时间戳字段（如果不存在）

ALTER TABLE your_table ADD COLUMN updated_at DATETIME DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP;

2. 查询增量数据

SELECT * FROM your_table WHERE updated_at > '2025-03-10';

3. 在 Navicat 中执行这个 SQL 查询

• 导出结果为 CSV、Excel 或直接复制粘贴
• 再导入到目标数据库

4. 自动化增量迁移（高级）

你可以写一个简单的 Python 脚本 + 定时任务（crontab / Windows 任务计划），结合 Navicat 的命令行接口（CLI）或者直接调用数据库 API 来实现自动化的增量迁移。

---

🔵 方法三：使用 Navicat 的 "数据同步" + "计划任务" 实现定时增量同步

✅ 功能说明：

1. 数据同步工具（Data Synchronization）

   • 可以对比两个数据库之间的差异，并选择是否同步表结构和数据
   • 支持"仅同步新增/修改"的数据（需手动配置过滤条件）

2. 计划任务（Schedule Task）

   • 可以设定每天/每小时运行一次数据同步任务

✅ 操作步骤：

1. 打开 Navicat，右键点击某个数据库 → 数据同步。
2. 设置源数据库和目标数据库。
3. 选择同步的对象（如某张表）。
4. 设置过滤条件（如 updated_at > '2025-03-10'）。
5. 点击"保存为任务" → 计划任务 → 设置执行频率（如每天凌晨 2 点）。
6. 启动任务即可。

---

🧩 四、推荐架构设计（用于长期迁移）

如果你希望长期维护数据库同步（比如生产环境 ↔ 测试环境），可以考虑以下方案：

方案	描述
Navicat + 时间戳字段 + 计划任务	最简单的方式，适合中小规模数据库
Navicat + ETL 工具（如 Talend、Informatica）	适合企业级复杂数据流管理
Navicat + Log Shipping / Replication	适用于 MySQL、PostgreSQL 等支持主从复制的数据库
Navicat + 自定义脚本 + 定时任务	灵活度高，适合个性化需求

---

🎯 五、示例：Python 脚本实现增量迁移（MySQL）

import mysql.connector

# 连接源库
src_conn = mysql.connector.connect(user='root', password='123456', host='localhost', database='source_db')
src_cursor = src_conn.cursor()

# 查询增量数据（例如最近一天）
query = "SELECT * FROM users WHERE updated_at > NOW() - INTERVAL 1 DAY"
src_cursor.execute(query)
rows = src_cursor.fetchall()

# 连接目标库并插入数据
tgt_conn = mysql.connector.connect(user='root', password='123456', host='remote_host', database='target_db')
tgt_cursor = tgt_conn.cursor()

for row in rows:
    insert_query = f"INSERT INTO users (id, name, email, updated_at) VALUES {row}"
    tgt_cursor.execute(insert_query)

tgt_conn.commit()

你可以在服务器上设置定时任务（crontab）来运行这个脚本，实现每日增量迁移。

---

📌 六、总结对比

迁移方式	是否支持增量	是否可视化	优点	缺点
Navicat 传输功能	❌（只能全量）	✅	简单易用	不支持自动增量
Navicat 数据同步 + 计划任务	✅（可手动设置）	✅	可定时执行	配置略复杂
自定义脚本 + Navicat	✅（灵活控制）	❌	强大灵活	技术门槛高
ETL 工具 + Navicat	✅（专业级）	✅	适合大规模数据	成本较高

---