TDSQL-MySQL相对MySQL5.7版本主从复制性能优化

TDSQL8.0 版本提升复制效率的性能优化

  1. 支持表级别并行复制,显著降低主备延迟

TDSQL 在 8.0 版本中引入了表级别并行复制功能,通过设置复制模式变量 slave_parallel_type 为 TABLE,实现基于表粒度的并行回放,有效提升备机应用 binlog 的并发能力。该优化特别适用于多表并发写入场景,可显著降低主备延迟。

  1. 优化 slave 节点写 relay log 性能,减少 I/O 开销

在 slave 节点上,通过参数 txsql_slave_io_optimaze_write 控制,将原本每接收一个事务就写入 relay log 的行为优化为"收到完成事务后再 write",从而减少频繁的磁盘写操作,提升 IO 效率。该参数在模板中默认开启,有助于提升复制链路整体吞吐。

  1. 强同步复制机制优化,保障高延迟网络下的复制性能

TDSQL 自研强同步复制技术解决了原生 MySQL 半同步的超时蜕化和高延迟下性能下降问题。通过以下机制实现:

引入 rpl_slave_ack_thread 线程异步处理 ACK,避免主线程阻塞;

使用 UDP 协议发送 ACK,并采用滑动窗口机制保证可靠性;

在 Master 等待 ACK 期间,会话被保存并切换线程处理其他请求,实现线程池异步化。

经过优化,在跨 IDC 高延迟场景下,强同步的 TPS 与异步复制相当,无性能损耗。

  1. Binlog Group Commit 锁优化,提升高并发提交性能

TDSQL 去除了 MySQL 原生的全局互斥锁机制,改为每个提交请求使用独立的条件变量和互斥锁,大幅降低锁冲突。这一优化减少了高并发事务提交时的等待时间,间接提升了主库生成 binlog 的效率,从而加快复制链路的数据产出速度。

  1. 大事务自动识别与 binlog 格式转换,降低从库重放开销

系统可自动识别大事务,并动态调整 binlog 记录格式,减少从库重放时的数据扫描行数。该优化直接降低备库应用日志的计算和 IO 成本,提升复制回放效率,尤其在批量更新场景下效果明显。

相关推荐
老纪26 分钟前
Redis分布式锁进第九零篇
数据库·redis·分布式
haven-85227 分钟前
MySQL事务ACID、隔离级别、MVCC、幻读解决
数据库·mysql
小高学习java44 分钟前
事务的边界问题,如何判断数据回滚时机。
java·数据库·后端
迷枫7122 小时前
【无标题】
数据库
TDengine (老段)2 小时前
TDengine 扫描算子 — TableScan、TagScan 与下推优化
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
放下华子我只抽RuiKe52 小时前
FastAPI 全栈后端(三):数据库与 ORM
前端·数据库·react.js·oracle·性能优化·前端框架·fastapi
一个天蝎座 白勺 程序猿2 小时前
从300秒到3秒:我在KES上“干掉“标量子查询的性能优化实践
性能优化·量子计算·kingbasees·向量化执行
Jinkxs2 小时前
Rust 性能优化全流程:从 flamegraph 定位瓶颈到 unsafe 与 SIMD 加速,响应快 2 倍
开发语言·性能优化·rust
醉颜凉2 小时前
Elasticsearch性能优化:JVM GC调优全攻略,彻底解决集群卡顿、吞吐量下降问题
jvm·elasticsearch·性能优化