达梦数据复制软件DMDRS搭建部署示例:源数据库DM8到目标数据库DM8数据迁移

关键词:DMDRS、达梦数据复制软件、DM8、数据迁移、搭建部署、DMDPI驱动、数据迁移命令、验证迁移结果
摘要:本文以源数据库DM8、目标数据库DM8为例,介绍数据迁移场景中DMDRS的搭建流程,主要步骤包括场景规划(业务规划、网络规划、目录规划)、设置DMDRS运行用户、设置环境变量(源、目标DMDRS均添加DMDPI驱动文件路径)、配置DMDRS服务(分别配置目标DMDRS服务与源DMDRS服务)、运行DMDRS服务(启动目标DMDRS服务、启动源DMDRS服务、在源DMDRS服务中执行数据迁移命令)以及验证迁移结果。数据迁移功能无需启动CPT模块,直接执行相应的数据迁移命令即可;配置文件中siteid为必配参数。

以示例的形式介绍数据迁移场景中DMDRS的搭建流程。

1 场景规划

业务规划

数据迁移场景中已部署两个数据库,包括源数据库DM8(192.168.20.24)和目标数据库DM8(192.168.20.21),现需通过搭建DMDRS,将源数据库RESOURCES模式下表EMPLOYEE的全量数据迁移到目标数据库的RESOURCES模式。

  • 源DMDRS:捕获源数据库的数据,将捕获到的数据发送到目标DMDRS。

  • 目标DMDRS:将接收的数据复制到目标数据库。

网络规划

DMDRS服务 IP地址和端口 连接数据库 说明
源DMDRS 192.168.20.24:5345 源数据库 DM8 192.168.20.24:5236 源DMDRS服务器需要安装DMDPI驱动与源数据库DM8连接。
目标DMDRS 192.168.20.21:5345 目标数据库 DM8 192.168.20.21:5236 目标DMDRS服务器需要安装DMDPI驱动与目标数据库DM8连接。

目录规划

源数据库、源DMDRS服务和目标DMDRS服务相关的目录规划如下表所示。

目录类型 目录名 目录示例
源数据库 数据库归档文件目录 /dm8/data/arch
源数据库 数据库DDL同步脚本目录 /home/dmdrs/dmdrs5/bin/scripts
源DMDRS服务 安装目录 /home/dmdrs/dmdrs5
源DMDRS服务 执行程序目录 /home/dmdrs/dmdrs5/bin
源DMDRS服务 配置文件路径 /home/dmdrs/dmdrs5/bin/cpt.xml
源DMDRS服务 服务脚本模板目录 /home/dmdrs/dmdrs5/bin/service_template
源DMDRS服务 服务脚本目录 /home/dmdrs/dmdrs5/bin
源DMDRS服务 console远程控制工具 /home/dmdrs/dmdrs5/bin/drcsl
目标DMDRS服务 安装目录 /home/dmdrs/dmdrs5
目标DMDRS服务 执行程序目录 /home/dmdrs/dmdrs5/bin
目标DMDRS服务 配置文件路径 /home/dmdrs/dmdrs5/bin/exec.xml
目标DMDRS服务 服务脚本模板目录 /home/dmdrs/dmdrs5/bin/service_template
目标DMDRS服务 服务脚本目录 /home/dmdrs/dmdrs5/bin
目标DMDRS服务 console远程控制工具 /home/dmdrs/dmdrs5/bin/drcsl

2 设置DMDRS运行用户

  1. 设置源DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限,并设置运行用户同数据库归档文件所在目录属同一用户组,此用户组应对归档文件所在目录及子目录有读权限。

  2. 设置目标DMDRS服务的运行用户对服务所在目录及子目录的读、写和执行权限。

3 设置环境变量

在源DMDRS和目标DMDRS服务器的环境变量中添加DMDPI驱动文件路径。

  1. 打开.bash_profile配置文件。

    shell 复制代码
    $ vi ~/.bash_profile
  2. 在.bash_profile配置文件末尾增加DMDPI驱动路径。

    shell 复制代码
    export LD_LIBRARY_PATH=<DMDPI驱动路径>:$LD_LIBRARY_PATH
  3. 保存并退出vi编辑器,使环境变量生效。

    shell 复制代码
    $ source ~/.bash_profile
  4. 查看环境变量是否设置成功。

    shell 复制代码
    $ echo $LD_LIBRARY_PATH

4 配置DMDRS服务

介绍源DMDRS服务和目标DMDRS服务的配置方法。

说明

以下DMDRS服务的配置文件仅为示例,在实际应用场景中,请根据实际搭建环境修改配置文件中的参数配置,具体的参数说明和其他功能参数配置请参见《DMDRS参考手册》。

4.1 配置目标DMDRS服务

在目标DMDRS服务的配置文件目录,打开并修改exec.xml配置文件,修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数,配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性,如果重复,会造成链路中数据复制的混乱。

xml 复制代码
<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <exec>
        <name>exec_dm8</name>
        <login>
            <dbtype>dm8</dbtype>
            <server>192.168.20.21</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
            <port>5236</port>
        </login>
    </exec>
</drs>

4.2 配置源DMDRS服务

在源DMDRS服务的配置文件目录,打开并修改cpt.xml配置文件,修改后配置文件如下所示。

注意

配置文件中的siteid为必配参数,配置时请确保源DMDRS和目标DMDRS服务站点号的唯一性,如果重复,会造成链路中数据复制的混乱。

xml 复制代码
<?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>站点号</siteid>
    </base>
    <cpt>
        <name>cpt_dm8</name>
        <login>
            <dbtype>dm8</dbtype>
            <server>192.168.20.24</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
            <port>5236</port>
        </login>
        <send>
            <ip>192.168.20.21</ip>
            <port>5345</port>
            <target_name>exec_dm8</target_name>
            <map>
                <item>RESOURCES.EMPLOYEE==RESOURCES.EMPLOYEE</item>
            </map>
        </send>
    </cpt>
</drs>

5 运行DMDRS服务

按照服务的运行顺序,启动目标DMDRS服务和源DMDRS服务。

5.1 启动目标DMDRS服务

  1. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。

    shell 复制代码
    $ cp TemplateService ../DrsService
  2. 打开并修改DrsService服务脚本中的相关配置参数。

    shell 复制代码
    $ vi DrsService
    shell 复制代码
    INSTALL_HOME=/home/dmdrs/dmdrs5
    PROG_DIR=/home/dmdrs/dmdrs5/bin
    CONF_PATH=/home/dmdrs/dmdrs5/bin/exec.xml
    EXEC_PROG_NAME=drsvr
    SERVICE_TYPE_NAME="drs server"
  3. 启动目标DMDRS服务。

    shell 复制代码
    $ ./DrsService start

5.2 启动源DMDRS服务

  1. 将服务脚本模板TemplateService拷贝到服务脚本目录并修改服务脚本的名称为DrsService。

    shell 复制代码
    $ cp TemplateService ../DrsService
  2. 打开并修改DrsService服务脚本中的相关配置参数。

    shell 复制代码
    $ vi DrsService
    shell 复制代码
    INSTALL_HOME=/home/dmdrs/dmdrs5
    PROG_DIR=/home/dmdrs/dmdrs5/bin
    CONF_PATH=/home/dmdrs/dmdrs5/bin/cpt.xml
    EXEC_PROG_NAME=drsvr
    SERVICE_TYPE_NAME="drs server"
  3. 启动源DMDRS服务。

    复制代码
    $ ./DrsService start

5.3 在源DMDRS服务中执行数据迁移命令

使用服务脚本启动服务后,需要使用远程控制台对服务中的CPT模块执行数据迁移命令。

说明

数据迁移功能无需启动CPT模块,直接执行相应的数据迁移命令即可,具体命令请参见《DMDRS控制台命令手册》。

  1. 启动控制台。

    shell 复制代码
    $ ./drcsl cpt.xml
  2. 连接源DMDRS服务。

    shell 复制代码
    CSL> connect
  3. 将源数据库RESOURCES模式下表EMPLOYEE的全量数据迁移到目标数据库。

    shell 复制代码
    CSL> alter cpt_dm8 cp "sch.name='RESOURCES' and tab.name='EMPLOYEE'"
  4. 使用命令查看数据迁移的监控信息,具体命令请参见《DMDRS控制台命令手册》。

6 验证迁移结果

验证源数据库中表RESOURCES.EMPLOYEE的数据是否已成功迁移到目标数据库。

如果你在使用AI助手时想了解源数据库DM8到目标数据库DM8数据迁移的DMDRS搭建流程(场景规划、环境配置、DMDRS服务配置与运行、执行数据迁移命令、验证迁移结果),这篇文章可以作为参考。

相关推荐
摇滚侠7 小时前
《On Java 中文版 基础卷》阅读笔记 实现隐藏 12
java·数据库·笔记
川石课堂软件测试8 小时前
学习软件测试需掌握的一些知识
数据库·python·sql·功能测试·网络协议·mysql·http
2501_937767169 小时前
自建 SQL 数据库定时备份踩坑复盘与落地思路
数据库·sql
silvamux_10 小时前
10款模型写种草笔记:可发布性、返工来源与成本数据缺口复盘
java·数据库·笔记
I Am a robert girl12 小时前
从 GameHorizon 拆解多时间尺度游戏评测:数据管线、离线基准与在线回放的三层设计
数据库·游戏·多时间尺度·数据管线·游戏评测·离线基准·在线回放
躺柒12 小时前
读数据安全架构设计与实践17安全架构案例(下)
数据库·安全·零信任·安全架构·防火墙·无边界
SelectDB12 小时前
实时更新排错现场:导入了却查到旧数据,和 FINAL 越加越慢的两条路
大数据·数据库·数据分析
SelectDB13 小时前
拿 Planet 的账单一行行对下来,我总结出三个可自查的校验点
大数据·数据库·数据分析
SelectDB13 小时前
Apache Doris + Vane:让多模态数据进入业务分析
大数据·数据库·数据分析
pjj1985415 小时前
ClickHouse 与 Doris 数据库技术梳理:看懂分析型数据库
数据库·clickhouse