AWS-数据库迁移工具DMS-场景:单账号跨区域迁移RDS for Mysql

参考文档:

分为几个环节:

要使用 AWS DMS 迁移至 Amazon RDS 数据库实例:

1.创建复制实例 有坑内存必须8g或者以上,我测试空库 都提示内存不足

2.创建目标和源终端节点 目标空库也得自己创建哈

3.刷新源终端节点架构

4.创建迁移任务需要手动启动任务,点击重启/恢复

5.监控您的迁移任务

1.创建测试源库

有前提条件
binlog_format ROW 需要修改源库的这个参数,否则会任务报错

注意安全组,这里我测试所以放行0.0.0.0:3306访问

写入测试数据

2.创建目标源库

新建和源库 一样数据库引擎版本的目标库 开放对应的安全组(保证dms的复制实例可以连通)

3.回到dms 创建复制实例

选择大于8g内存的机器,配置对应网络信息,保证和源和目标库能正常通讯,即涉及到的各个安全组放行

4.创建端点(源和目标)

支持直接选择本地区的rds资源,或者也可以使用自定义主机账密的方式连接,当然要保证有对应权限

创建完成,记得测试连通性(即复制实例到对应的RDS的安全组和网络可达)

5.创建复制任务

选择对应的配置任务详细

必须要有个规则,否则会报错,选默认的即可

打开cloudwach 日志方便观察迁移失败的详细日志

勾选开始前的任务评测,或者启动可能失败,需要提前配置好iam 的相关配置,

当然桶也要能iam访问,(可以设置个公开的桶跳过s3 policy to iam这一步)

iam 相关配置参考

文档指导https://docs.aws.amazon.com/zh_cn/dms/latest/userguide/CHAP_Tasks.AssessmentReport.html

json 复制代码
{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "",
            "Effect": "Allow",
            "Principal": {
                "Service": "dms.amazonaws.com"
            },
            "Action": "sts:AssumeRole"
        }
    ]
}

点击重启/恢复启动 失败的话就去创建迁移前评估

可能会报错就去cloudwath查看对应日志

rds 迁移 可能是因为 admin账号权限不够操作系统库导致,忽略即可,测试迁移效果和是否能增量复制

6.测试验证迁移效果

目标库已经有了

测试增量复制-源库写入 需要等待一会 有延迟

查看日志

目标库验证

故障解答

错误排查
https://repost.aws/zh-Hans/knowledge-center/dms-task-error-status

内存不足
https://repost.aws/knowledge-center/dms-troubleshoot-errors

相关推荐
SirLancelot13 天前
MinIO-基本介绍(一)基本概念、特点、适用场景
后端·云原生·中间件·容器·aws·对象存储·minio
AWS官方合作商7 天前
打破数据枷锁:在AWS上解锁Oracle数据库的无限潜能
数据库·oracle·aws
weixin_307779138 天前
通过AWS IAM Policy Simulator进行权限验证和模拟测试
运维·系统安全·aws·安全架构·安全性测试
亚林瓜子8 天前
AWS中国云中的ETL之从aurora搬数据到s3(Glue版)
hadoop·spark·云计算·etl·aws
遥感之家9 天前
AWS下载sentinel-2原始影像
云计算·sentinel·aws
亚林瓜子9 天前
AWS中的离线计算(大数据大屏项目)
大数据·hadoop·sql·spark·云计算·aws
AWS官方合作商9 天前
AWS实战:轻松创建弹性IP,实现固定公网IP地址
tcp/ip·云计算·aws
伊织code10 天前
AWS Toolkit - 注册 AWS Builder ID 账号
云计算·aws
SkyXZ~10 天前
AWS SageMaker SDK 完整教程:从零开始云端训练你的模型
人工智能·深度学习·云计算·aws·sagemaker·boto3
weixin_3077791310 天前
Redshift SQL搜索表中所有字段的值
数据仓库·sql·算法·云计算·aws