分布式数据库备份实践

在分布式备份中可以采取两种方式进行备份,一种是采用手动编写backup.yml文件进行备份,另外一种是吧备份过程交给备份工具自动执行。如果需要个性化进行备份,建议采用手动编写备份文件方式进行备份。

以下是针对两种备份方式的实践:
集群状态

备份方案一

通过手动调整分布式节点archiv_command参数,并编写backup.yml文件进行编写

复制代码
ha_ctl set gtm gtm1 -p archive_command="'scp %p 10.xx.xx.199:/backup/gtm_wal/%f'" -c panwei -l http://10.xx.xx.199:2379
ha_ctl set datanode dn1_1 -p archive_command="'scp %p 10.xx.xx.199:/backup/dn1_wal/%f'" -c panwei -l http://10.xx.xx.199:2379
ha_ctl set datanode dn1_2 -p archive_command="'scp %p 10.xx.xx.199:/backup/dn1_wal/%f'" -c panwei -l http://10.xx.xx.199:2379
## CN节点可以不做归档设置,并且不需要进行备份
## 同时建议同一分片的不同副本,如:dn1_1、dn1_2、dn1_3等副本设置归档路径为同一主机同一路径下,即使数据库发生主备切换,仍然方便收集归档日志文件。
复制代码
vi /software/backup.yml
gtm:
    backup_host: 10.xx.xx.199
    backup_dir: /software/gtm
    tbs_dir: /software/gtm_tbs
datanode:
  - dn1:
      backup_host: 10.xx.xx.199
      backup_dir: /software/dn1
      tbs_dir: /software/dn1_tbs

通过备份命令

复制代码
## 进行全量备份
ha_ctl backup all -p /software -c panwei -U test -W 'xxxxxx' -l http://10.xx.xx.199:2379
复制代码
## 进行增量备份
ha_ctl backup all -a '-b PTRACK' -p /software -c panwei -U test -W 'xxxxxx' -l http://10.xx.xx.199:2379
复制代码
## 查看备份集
ha_ctl backup show -p /software -l http://10.xx.xx.199:2379
复制代码
## 校验备份集
ha_ctl backup validate -p /software -l http://10.xx.xx.199:2379

备份方案二

通过填写备份文件模板进行备份。

复制代码
vi /software/backup_new.yml
backup_host: 192.168.174.170 #or local
backup_dir: /software

备份命令

复制代码
## 进行全量备份
ha_ctl backup all -p /software -c panwei -U test -W 'xxxxxx' -l http://10.xx.xx.199:2379

同时在通过填写备份文件模板自动备份时,我们可以发现,备份工具对我们数据库参数进行自动设置,对比备份前后的gtm以及dn节点的archive_command参数值,备份工具自动进行调整为备份路径,从而设置归档路径。

复制代码
## 进行增量备份
ha_ctl backup all -a '-b PTRACK' -p /software -c panwei -U test -W 'xxxxxx' -l http://10.xx.xx.199:2379
复制代码
## 查看备份集
ha_ctl backup show -p /software -l http://10.xx.xx.199:2379
复制代码
## 校验备份集
ha_ctl backup validate -p /backup_new -l http://10.xx.xx.199:2379
相关推荐
代码的余温11 分钟前
Marshalling与Demarshalling深度解析
java·分布式·跨进程通信
百度智能云技术站32 分钟前
Redis 数据恢复的月光宝盒,闪回到任意指定时间
数据库·redis
~央千澈~35 分钟前
评论功能开发全解析:从数据库设计到多语言实现-优雅草卓伊凡
java·前端·数据库
灰小猿1 小时前
分布式项目保证消息幂等性的常见策略
java·redis·分布式·高并发·springcloud
Akamai中国2 小时前
使用 Akamai 分布式云与 CDN 保障视频供稿传输安全
分布式·安全·云计算·音视频
茶本无香2 小时前
数据库查询性能优化:深入理解与应用物化视图
数据库·性能优化·查询·物化视图
2501_915373882 小时前
neo4j删除所有数据
数据库·neo4j
预测及优化2 小时前
新能源集群划分+电压调节!基于分布式能源集群划分的电压调节策略!
分布式·能源·强化学习·数据驱动·综合能源·集群划分·电压调整
TDengine (老段)2 小时前
TDengine 运维——巡检工具(安装工具)
大数据·运维·数据库·物联网·时序数据库·tdengine·涛思数据
忆雾屿3 小时前
云原生时代 Kafka 深度实践:03进阶特性与最佳实践
java·分布式·后端·kafka