线上踩坑:Binlog重放,线上服务未停止导致主键冲突

问题描述:由于DBever的某种bug,它对于Schema管理的混乱。导致某种情况下,断线重连数据库并刷新连接后,会执行drop schema 操作,导致删库。删库恢复流程:用我本地导出的备份dump+binlog重放。dump过程没有问题,但是由于当时线上的服务一直没有停止,它有定时任务会不停往部分表中推数据,从而部分主键被占用。binlog重跑途中直接主键冲突报错停止。

解决方式:卸载Dbever+binlog重跑时停止所有线上服务。

还有个小优化,由于当时我们服务器需要vpn上传文件,带宽很低,而备份文件.sql多达10个多g,直接上传需要好几个小时,因此直接压缩再上传,10个g文件直接压缩成300多MB。

gzip -6 -c dump-cons_manage_platform-202608221324.sql > dump-cons_manage_platform-202608221324.sql.gz

上传完之后校验:

gzip -t dump-cons_manage_platform-202608221324.sql.gz

相关推荐
呉師傅1 小时前
得力P2500、M2500系列打印机硒鼓加粉及清零方法【纯享版】
运维·网络·windows·电脑
Sayai1 小时前
Elasticsearch 日志检索 DSL 实战:时间范围查询、字段去重、分钟级统计与最新日志获取
大数据·运维·elasticsearch·搜索引擎·日志分析
qetfw1 小时前
Debian Chrony 时间同步、RAID5 与 LUKS 磁盘加密配置
linux·debian
fb_123453 小时前
MySQL运维实战:备份恢复+主从复制+读写分离+MHA高可用(超详细手把手教程)
运维·mysql·oracle
东城居士4 小时前
Linux驱动阻塞与非阻塞访问的理解
linux·嵌入式系统
..Dauntless..4 小时前
【Linux】进程地址空间初步理解
linux·运维·服务器
Julien20044 小时前
Docker 网络(一)
linux·运维·服务器·ssh·学习方法
字节跳动的猫4 小时前
LikeShop 积分体系全链路改造:获取规则、订单抵扣与积分商品兑换二开
运维·数据结构
杨云龙UP4 小时前
一次数据库查询缓慢故障复盘:大表数据增长、SQL全表扫描导致系统响应异常
linux·运维·服务器·数据库·sql·mysql
PellyKoo5 小时前
【linux运维】ubuntu+samba 用户组独占目录权限配置踩坑记
linux·运维·ubuntu