TDSQL8.0 版本提升复制效率的性能优化
- 支持表级别并行复制,显著降低主备延迟
TDSQL 在 8.0 版本中引入了表级别并行复制功能,通过设置复制模式变量 slave_parallel_type 为 TABLE,实现基于表粒度的并行回放,有效提升备机应用 binlog 的并发能力。该优化特别适用于多表并发写入场景,可显著降低主备延迟。
- 优化 slave 节点写 relay log 性能,减少 I/O 开销
在 slave 节点上,通过参数 txsql_slave_io_optimaze_write 控制,将原本每接收一个事务就写入 relay log 的行为优化为"收到完成事务后再 write",从而减少频繁的磁盘写操作,提升 IO 效率。该参数在模板中默认开启,有助于提升复制链路整体吞吐。
- 强同步复制机制优化,保障高延迟网络下的复制性能
TDSQL 自研强同步复制技术解决了原生 MySQL 半同步的超时蜕化和高延迟下性能下降问题。通过以下机制实现:
引入 rpl_slave_ack_thread 线程异步处理 ACK,避免主线程阻塞;
使用 UDP 协议发送 ACK,并采用滑动窗口机制保证可靠性;
在 Master 等待 ACK 期间,会话被保存并切换线程处理其他请求,实现线程池异步化。
经过优化,在跨 IDC 高延迟场景下,强同步的 TPS 与异步复制相当,无性能损耗。
- Binlog Group Commit 锁优化,提升高并发提交性能
TDSQL 去除了 MySQL 原生的全局互斥锁机制,改为每个提交请求使用独立的条件变量和互斥锁,大幅降低锁冲突。这一优化减少了高并发事务提交时的等待时间,间接提升了主库生成 binlog 的效率,从而加快复制链路的数据产出速度。
- 大事务自动识别与 binlog 格式转换,降低从库重放开销
系统可自动识别大事务,并动态调整 binlog 记录格式,减少从库重放时的数据扫描行数。该优化直接降低备库应用日志的计算和 IO 成本,提升复制回放效率,尤其在批量更新场景下效果明显。