TDSQL-MySQL相对MySQL5.7版本主从复制性能优化

TDSQL8.0 版本提升复制效率的性能优化

  1. 支持表级别并行复制,显著降低主备延迟

TDSQL 在 8.0 版本中引入了表级别并行复制功能,通过设置复制模式变量 slave_parallel_type 为 TABLE,实现基于表粒度的并行回放,有效提升备机应用 binlog 的并发能力。该优化特别适用于多表并发写入场景,可显著降低主备延迟。

  1. 优化 slave 节点写 relay log 性能,减少 I/O 开销

在 slave 节点上,通过参数 txsql_slave_io_optimaze_write 控制,将原本每接收一个事务就写入 relay log 的行为优化为"收到完成事务后再 write",从而减少频繁的磁盘写操作,提升 IO 效率。该参数在模板中默认开启,有助于提升复制链路整体吞吐。

  1. 强同步复制机制优化,保障高延迟网络下的复制性能

TDSQL 自研强同步复制技术解决了原生 MySQL 半同步的超时蜕化和高延迟下性能下降问题。通过以下机制实现:

引入 rpl_slave_ack_thread 线程异步处理 ACK,避免主线程阻塞;

使用 UDP 协议发送 ACK,并采用滑动窗口机制保证可靠性;

在 Master 等待 ACK 期间,会话被保存并切换线程处理其他请求,实现线程池异步化。

经过优化,在跨 IDC 高延迟场景下,强同步的 TPS 与异步复制相当,无性能损耗。

  1. Binlog Group Commit 锁优化,提升高并发提交性能

TDSQL 去除了 MySQL 原生的全局互斥锁机制,改为每个提交请求使用独立的条件变量和互斥锁,大幅降低锁冲突。这一优化减少了高并发事务提交时的等待时间,间接提升了主库生成 binlog 的效率,从而加快复制链路的数据产出速度。

  1. 大事务自动识别与 binlog 格式转换,降低从库重放开销

系统可自动识别大事务,并动态调整 binlog 记录格式,减少从库重放时的数据扫描行数。该优化直接降低备库应用日志的计算和 IO 成本,提升复制回放效率,尤其在批量更新场景下效果明显。

相关推荐
搬砖柯几秒前
系列12-接口压测怎么做成平台能力?自研 httpx 引擎、分布式 Worker 与 Locust 选型对照
分布式·测试工具·性能优化·开源·自动化·httpx
运维行者_9 小时前
企业无线网络监控的挑战与智能化演进趋势
大数据·运维·服务器·网络·数据库
国强_dev10 小时前
技术探讨:使用 stunnel 加密转发数据库连接时,如何获取客户端真实 IP?
数据库·网络协议·tcp/ip
@insist12310 小时前
系统规划与管理师-信息系统规划核心工作要点解析
数据库·软考·系统规划与管理师·软件水平考试·系统规划与管理工程师
超级数据查看器10 小时前
超级数据查看器 v10.0 发布
java·大数据·数据库·sqlite·安卓
数安3000天10 小时前
增量数据如何自动分类分级,避免目录“过期“?
大数据·数据库
南墙上的石头11 小时前
麒麟 V10 重装人大金仓 V8R6 踩坑实录(含 MySQL 兼容模式)
数据库·mysql
画中有画12 小时前
论向量数据库在项目中的应用
数据库
spider_xcxc12 小时前
Redis 数据库高质量实践指南(一)
运维·数据库·redis·oracle·云计算
l1t13 小时前
在linux和windows中解决duckdb 1.6dev版本输出执行计划报错问题
linux·运维·数据库·windows·duckdb