达梦数据库-读写分离集群部署

读写分离集群部署

读写分离集群由一个主库以及一个或者多个(最多可以配置 8 个)实时备库组成，基于实时归档实现的高性能数据库集群，不但提供数据保护、容灾等数据守护基本功能，还具有读写操作自动分离、负载均衡等特性。同时可以配置确认监视器达到主备库自动切换实现高可用特性。读写分离集群适合读多写少的应用环境。

部署规划(REALTIME 自动切换)

1写1读2节点读写分离集群部署规划

IP规划：

主机名	服务ip	心跳ip	数据库名	实例名
dm01	192.168.10.101	192.168.10.101	dmdb	rw1
dm02	192.168.10.102	192.168.10.102	dmdb	rw2

端口规划：

实例名	实例端口	MAL 系统监听 TCP 连接的端口	实例本地的守护进程监听 TCP 连接的端口	实例监听守护进程 TCP 连接的端口
rw1	5236	7336	7436	7536
rw2	5236	7336	7436	7536

本地存储LVM磁盘规划：（按实际需求调整磁盘空间）

磁盘 LVM磁盘名/用途

/dev/sdc(100G) /dev/dmappvg/dmapplv (数据库安装磁盘)

/dev/sde(500G) /dev/dmdatavg/dmdatalv (数据磁盘)

/dev/sdf(500G) /dev/dmbakvg/dmbaklv (备份磁盘)

目录规划：（在对应服务器上创建目录owner为dmdba组为dinstall）

数据库软件安装目录 /home/dmdba/dmdbms

实例安装目录 /dmdata/

归档日志存放目录 /dmdata/arch

备份文件存放目录 /dmdata/dmbak/

操作系统配置

该步骤与单机部署一致，详情见达梦数据库单机部署步骤

数据库软件安装

该步骤与单机部署一致，详情见达梦数据库单机部署步骤

读写分离集群配置

初始化实例

2个节点完成实例初始化

执行以下命令

/home/dmdba/dmdbms/bin/dminit path=/dmdata page_size=32 extent_size=32 charset=1 log_size=2048 db_name=dmdb instance_name=dmdb SYSDBA_PWD="password" SYSAUDITOR_PWD="password"

以主机dmdb01为读写分离主库，启动实例

/home/dmdba/dmdbms/bin/dmserver /dmdata/dmdb/dm.ini

出现system is ready后输入exit停止数据库。

脱机备份数据库

在主机dmdb01上执行以下命令，确认主库 dmap 服务已启动：

ps -ef|grep dmap

若未启动，则先启动 DMAP 服务，dmdba 到安装目录的 bin 下执行以下命令：

./DmAPService start

dmdba用户启动dmrman工具

/home/dmdba/dmdbms/bin/dmrman use_ap=2

执行 backup 全库：

backup database '/dmdata/dmdb/dm.ini' backupset '/home/dmdba/bakfull';

使用方式，如下图：

修改dm.ini参数

所有节点都要修改

执行以下命令：

vi /dmdata/dmdb/dm.ini

主库Dmdb01上修改以下参数值：

bash 复制代码

INSTANCE_NAME = rw1
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间

备库Dmdb02上修改以下参数值：

bash 复制代码

INSTANCE_NAME = rw2
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

配置归档配置文件 dmarch.ini

在实例目录下新建文件 dmarch.ini，执行以下命令：

vi /dmdata/dmdb/dmarch.ini

REALTIME自动切换模式下

需要指定ARCH_WAIT_APPLY=1保证主备事务一致：

在实例目录下新建文件 dmarch.ini，执行以下命令：

vi /dmdata/dmdb/dmarch.ini

主库dmdb01上添加以下内容：

bash 复制代码

ARCH_WAIT_APPLY=1
[ARCHIVE_REALTIME1]  
ARCH_TYPE     = REALTIME  #即时归档类型
ARCH_DEST     = rw2 #即时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL  #本地归档类型
ARCH_DEST     = /dmdata/arch    #本地归档文件存放路径
ARCH_FILE_SIZE    = 2048 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT  = 102400  #单位 Mb，0 表示无限制，范围 1024~4294967294M

备库dmdb02上添加以下内容：

bash 复制代码

ARCH_WAIT_APPLY=1
[ARCHIVE_REALTIME1]  
ARCH_TYPE     = REALTIME
ARCH_DEST     = rw1
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL
ARCH_DEST     = /dmdata/arch
ARCH_FILE_SIZE    = 2048
ARCH_SPACE_LIMIT  = 102400

配置MAL系统配置文件 dmmal.ini

在实例目录下新建文件 dmmal.ini，执行以下命令。

vi /dmdata/dmdb/dmmal.ini

主备库2个节点文件内容要相同。

bash 复制代码

MAL_CHECK_INTERVAL   = 5   #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL  = 15   #判定 MAL 链路断开的时间
[MAL_INST1]
  MAL_INST_NAME = rw1 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
  MAL_HOST     = 192.168.10.101  #MAL 系统监听 TCP 连接的 IP 地址
  MAL_PORT     = 7336 #MAL 系统监听 TCP 连接的端口
  MAL_INST_HOST   = 192.168.10.101  #实例的对外服务 IP 地址
  MAL_INST_PORT   = 5236 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
  MAL_DW_PORT   = 7436 #实例对应的守护进程监听 TCP 连接的端口
  MAL_INST_DW_PORT = 7536 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
  MAL_INST_NAME = rw2
  MAL_HOST      = 192.168.10.102
  MAL_PORT          = 7336
  MAL_INST_HOST         = 192.168.10.102
  MAL_INST_PORT         = 5236
  MAL_DW_PORT  = 7436
  MAL_INST_DW_PORT = 7536

配置守护进程配置文件 dmwatcher.ini

在实例目录下新建文件 dmwatcher.ini，执行以下命令：

vi /dmdata/dmdb/dmwatcher.ini

主备库2节点文件内容要相同。配置为全局守护类型，使用自动切换模式

bash 复制代码

[GRP_RW] 
DW_TYPE    = GLOBAL #全局守护类型
DW_MODE    = AUTO #自动切换模式
DW_ERROR_TIME     = 30 #远程守护进程故障认定时间
INST_RECOVER_TIME  = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME   = 20  #本地实例故障认定时间
INST_OGUID         = 453331 #守护系统唯一 OGUID 值
INST_INI           = /dmdata/dmdb/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART  = 1 #打开实例的自动启动功能
INST_STARTUP_CMD   = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动

备份还原备库

将备份的文件/home/dmdba/bakfull拷贝到另外两台服务器上。

在主机dmdb02

使用 dmrman 工具还原备库，dmdba 用户执行：

dmrman use_ap=2

进入dmrman工具交互界面

执行 restore：

restore database '/dmdata/dmdb/dm.ini' from backupset '/home/dmdba/bakfull';

完成后执行 recover：

recover database '/dmdata/dmdb/dm.ini' from backupset '/home/dmdba/bakfull';

最后执行 recover update db_magic。

recover database '/dmdata/dmdb/dm.ini' update db_magic;

注册服务

以上启动为前台方式启动，仅用户搭建过程中验证配置。配置没问题后需要将实例，守护进程和确认监视器注册为系统服务。

使用 root 用户，到数据库安装目录的script/root下。

注册守护进程服务（主备库都执行）。

bash 复制代码

./dm_service_installer.sh -t dmwatcher -p DW -watcher_ini /dmdata/dmdb/dmwatcher.ini

注册数据库实例服务（主备库都执行）：

主库：

bash 复制代码

/home/dmdba/dmdbms/script/root/dm_service_installer.sh -t dmserver -p rw1 -dm_ini /dmdata/dmdb/dm.ini -m mount

备库：

bash 复制代码

/home/dmdba/dmdbms/script/root/dm_service_installer.sh -t dmserver -p rw2 -dm_ini /dmdata/dmdb/dm.ini -m mount

注册之后先不启动，启动服务不以root用户，而要用dmdba用户，启动脚本在v$DM_HOME/bin目录下（也就是软件安装的bin目录），执行ll|grep Dm可以看到。

Mount状态启动集群

以 mount 方式启动数据库实例

使用 dmdba 用户，执行以下命令（主备库都执行）：

dmserver /dmdata/dmdb/dm.ini mount

主备库都要是ready状态，表示成功

在新的终端使用 disql 工具连接数据库：

disql SYSDBA/'"password"'

主备库都修改 oguid，执行以下命令：

sp_set_oguid(453331);

主库dmdb01上修改数据库模式为 primary，执行以下命令：

alter database primary;

备库dmdb02上修改数据库模式为 standby，执行以下命令：

alter database standby;

启动守护进程

dmdba 用户下，到数据库安装目录的 bin 下执行以下命令（主备库都执行）：

dmwatcher /dmdata/dmdb/dmwatcher.ini

守护进程启动后，会将 Mount 的实例 Open。这里是前台启动的方式，因为我们前面注册了服务名称，所以就没必要前台启动，直接配好主从的主备关系后crtl+C退出两个实例的前台mount启动，然后调整实例启动服务脚本里的启动状态，依次按顺序启动主、备库实例、然后再主、备库的守护DmWatcher服务。

配置监视器

守护进程配置为自动切换时，必须配置确认监视器。在主备服务器以外的服务器上（需安装有 DM 数据库软件，且与主备心跳网络端口开放）。

新建确认监视器配置文件 dmmonitor.ini，执行以下命令：

vi /dmdata/dmdb/dmmonitor.ini

添加以下内容：

bash 复制代码

MON_DW_CONFIRM    = 1 #确认监视器模式
MON_LOG_PATH    = /home/dmdba/dmdbms/log #监视器日志文件存放路径
MON_LOG_INTERVAL  = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE   = 200  #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT  = 1024 
[GRP_RW] 
 MON_INST_OGUID    = 453331 #组 GRP1 的唯一 OGUID 值
#监视器到组 GRP1 的守护进程的连接信息;IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
 MON_DW_IP     = 192.168.10.101:7436 
 MON_DW_IP     = 192.168.10.102:7436

执行以下命令，启动监视器。

bash 复制代码

/home/dmdba/dmdbms/bin/dmmonitor /dmdata/dmdb/dmmonitor.ini

启动后输入 show 命令查看集群状态。

验证主备集群同步状态

disql 客户端验证

使用 disql 客户端登录主库，创建测试表，插入数据，执行以下命令：

注意密码含有特殊字符时的转义处理

disql SYSDBA/'"password"'@192.168.10.101:5236

SQL 提示符下执行以下命令：

sql 复制代码

create table test(id int);
insert into test values (1);
commit;

使用 disql 客户端登录备库，查询测试表验证，执行以下命令：

disql SYSDBA/'"password"'@dameng123@192.168.10.102:5236

SQL 提示符下执行以下命令：

select * from test;

查看数据是否正常同步。

配置sql日志

所有节点修改sqllog.ini

vi /dmdata/dmdb/sqllog.ini

bash 复制代码

BUF_TOTAL_SIZE = 10240
BUF_SIZE = 1024
BUF_KEEP_CNT = 6
[SLOG_ALL]
FILE_PATH = ../log
PART_STOR = 1
SWITCH_MODE = 2
SWITCH_LIMIT = 512
ASYNC_FLUSH = 1
FILE_NUM = 5
ITEMS = 0
SQL_TRACE_MASK = 2:3:25
MIN_EXEC_TIME = 1500
USER_MODE = 0
USERS =

客户端连接集群

客户端主机上需要配置 dm_svc.conf 文件（未安装 DM 数据库的机器新建即可），文件路径：

32 位的 DM 安装在 Win32 操作平台下，此文件位于 %SystemRoot%\system32 目录；

64 位的 DM 安装在 Win64 操作平台下，此文件位于 %SystemRoot%\system32 目录；

32 位的 DM 安装在 Win64 操作平台下，此文件位于 %SystemRoot%\SysWOW64 目录；

在 Linux 平台下，此文件位于/etc 目录。

文件内容：

bash 复制代码

#以#开头的行表示是注释
#全局配置区
DMRW=(192.168.10.101:5236,192.168.10.102:5236)
TIME_ZONE=(+480) #表示+8:00 时区
LOGIN_ENCRYPT=(0)
DIRECT=(Y)
#服务配置区
[DMRW]
LOGIN_MODE=(1)#只连主库
RW_SEPARATE=(1) #是否启用读写分离
RW_PERCENT=(10) #读写分离分发比例

客户端程序连接数据库时，需要指定 IP 端口处替换为服务名即可，例如：disql SYSDBA/'"password"'@DMRW。jdbc的url为：jdbc:dm://DMRW

注意：

1)当修改了 dm_svc.conf 内容后，需要重启客户端程序，修改的配置才能生效。

2)请把该文件路径授予666权限。

到此就完成了达梦数据库读写分离集群的部署。

更多详细资料可前往达梦社区：https://eco.dameng.com