公有云迁移研究——AWS DMS

大纲

  • [1 什么是DMS](#1 什么是DMS)
  • [2 DMS的作用](#2 DMS的作用)
  • [3 DMS在迁移的时候都做些什么](#3 DMS在迁移的时候都做些什么)
  • [4 在使用DMS的时候我们需要做些什么](#4 在使用DMS的时候我们需要做些什么)
  • [5 操作](#5 操作)
    • [5.1 创建两个数据库终端节点](#5.1 创建两个数据库终端节点)
    • [5.2 创建迁移任务](#5.2 创建迁移任务)
  • [6 可能遇到的问题](#6 可能遇到的问题)
  • [7 总结](#7 总结)

在本地机房或其他云往AWS上做迁移时,往往会遇到数据库迁移的任务。如果数据量不是特别大,我们一般会使用AWS DMS做迁移。本文主要介绍下DMS的作用和应用,以及注意事项。

1 什么是DMS

AWS Database Migration Service (AWS DMS) 是一项云服务,可轻松迁移关系数据库、数据仓库、NoSQL数据库及其他类型的数据存储。您可以使用AWS DMS将数据迁移到AWS Cloud。

2 DMS的作用

它用于将数据从源数据存储迁移到目标数据存储。这两个数据存储称为终端节点 。您可在使用相同数据库引擎 的源和目标终端节点之间迁移。您也可在使用不同数据库引擎 的源和目标终端节点之间迁移。

需要注意的是:它不支持关系型数据库到非关系型数据库直接的迁移。

3 DMS在迁移的时候都做些什么

  • DMS 创建出表结构
  • DMS 创建出主键唯一索引
  • DMS不会 创建二级索引
  • DMS不会 创建非主键约束
  • DMS不会 创建默认值

4 在使用DMS的时候我们需要做些什么

  • 在使用DMS的时候,DMS会将数据原封不动的迁移到目标数据库上。DMS在创建出数据表结构以后,我们需要修复数据库的二级索引,非主键约束和一些字段的默认值。
  • 我们还可以创建数据库迁移任务,来实现对数据库的持续迁移。这样我们在项目迁移中保证了线上数据的一致性,迁移完成后方便做数据库层面的切割。

5 操作

5.1 创建两个数据库终端节点

5.2 创建迁移任务

这样迁移任务就创建好了,这时候我们只需要关注迁移任务是否出错。并在结束后修复表的二级索引、非主键约束和字段默认值。

6 可能遇到的问题

问题:迁移完成后部分查询出错和查询变慢。

解决:因为DMS不会迁移源的外键、二级索引和字段默认值,需要在数据迁移后,手工修复上述结构问题。修完后,服务得到了恢复,查询速度也会恢复正常。

7 总结

  • 在平时开发项目的时候尽量少用外键约束,这样会增加数据库迁移的复杂度和数据修复的复杂度。
  • 迁移完成后要对数据库的表结构进行检查,这样可以降低迁移带来的各种系统灾难。
相关推荐
Johny_Zhao4 小时前
Docker + CentOS 部署 Zookeeper 集群 + Kubernetes Operator 自动化运维方案
linux·网络安全·docker·信息安全·zookeeper·kubernetes·云计算·系统运维
鸭鸭鸭进京赶烤5 小时前
大学专业科普 | 云计算、大数据
大数据·云计算
SH11HF9 小时前
小菜狗的云计算之旅,学习了解rsync+sersync实现数据实时同步(详细操作步骤)
学习·云计算
搞笑的秀儿12 小时前
信息新技术
大数据·人工智能·物联网·云计算·区块链
SelectDB12 小时前
SelectDB 在 AWS Graviton ARM 架构下相比 x86 实现 36% 性价比提升
大数据·架构·aws
泊浮目20 小时前
未来数据库硬件-网络篇
数据库·架构·云计算
运维开发王义杰1 天前
金融安全生命线:用AWS EventBridge和CloudTrail构建主动式入侵检测系统
安全·金融·aws
UI设计和前端开发从业者2 天前
UI前端大数据处理策略优化:基于云计算的数据存储与计算
前端·ui·云计算
我是小bā吖2 天前
阿里云服务网格ASM实践
网络·阿里云·云计算·服务发现
长征coder2 天前
AWS MySQL 读写分离配置指南
mysql·云计算·aws