MySQL 架构大变革(全景版):从 5.7 到 9.7 的十年进化图谱

一、引言:十年演进,五十余个小版本的层层累积

回顾 MySQL 的演进历史,很少有人真正注意到:从 MySQL 5.7 的起点(2015 年 10 月)到最终版本 5.7.44(2023 年 10 月),整整 8 年间发布了超过 40 个版本,而 MySQL 8.0 更是在长达 8 年的生命周期(2018 年 4 月至 2026 年 5 月)中推出了超过 40 个小版本。InnoDB 架构从"集中式设计"走向"模块化架构",从来不是某一次大版本发布的瞬时成果,而是在这 80 多个小版本中层层累积、反复打磨的结果。

本文的核心目标,正是填补这一被长期忽视的空白------将 MySQL 5.7 和 MySQL 8.0 各小版本的演进"颗粒度"打散,逐一揭示每个关键节点上 InnoDB 架构的细微改进,最终拼出从 5.7 到 9.7 的完整演进全景图。

MySQL 5.7 与 8.0 完整版本时间轴

MySQL 5.7 历经 5.7.4 到 5.7.44 共 40 余个正式版本,生命周期横跨 2015 至 2023 年。

MySQL 8.0 历经 8.0.0 到 8.0.41 共 40 余个版本,生命周期从 2018 年延伸至 2026 年。

MySQL 9.7 于 2026 年 4 月 21 日正式发布。

二、MySQL 5.7 各版本细粒度演进:从集中式 ibdata1 到"初尝模块化"

MySQL 5.7 虽然表面上仍是"所有元数据集中在 ibdata1"的架构,但在 8 年的演进历程中,每一处细微的优化都为后续的架构拆分埋下了伏笔。

2.1 MySQL 5.7.4 到 5.7.6:奠基阶段(2014--2015)

5.7.4(2014 年 9 月)------临时表空间迈出独立第一步:

  • InnoDB 引入了独立的共享临时表空间,将内部临时表和显式创建的临时表(使用 CREATE TEMPORARY TABLE 显式创建)从系统表空间 ibdata1 中分离出来,存储于数据目录下的 ibtmp1 文件中。
  • 这一改动的深远意义:它是 InnoDB 磁盘架构中第一个从 ibdata1"剥离"出去的核心模块,代表了"模块化拆分"思路的最早萌芽。

5.7.5(2015 年 1 月)------Buffer Pool 预热控制首次精细化:

  • 引入了 innodb_buffer_pool_dump_pct 参数,用于控制每个 Buffer Pool Instance 中有多少比例的热页面在执行 SET GLOBAL innodb_buffer_pool_dump_now=ON 时被转储到磁盘。
  • 此前在 MySQL 5.6 中,Buffer Pool 持久化(转储/加载)功能虽然已经引入,但 5.7.5 之前的版本只支持全部转储或完全不转储,这在大型实例中引发了严重的预热延后问题。innodb_buffer_pool_dump_pct 的引入,使 DBA 可以根据业务场景灵活调整预热比例,在高性能和快速启动之间取得了关键性平衡。

5.7.6(2015 年 4 月)------Page Size 扩展与 Online DDL 重构:

  • InnoDB 开始支持 32KB 和 64KB 的页面大小,此前仅支持 4KB、8KB、16KB。更大的页面大小对于大规模顺序扫描和某些 OLAP 场景存在性能收益。
  • 与此同时,对 Online DDL 的实现进行了重要重构,为后续版本引入更复杂的在线 DDL 操作奠定了基础。

2.2 MySQL 5.7.8 到 5.7.13:功能完善期(2015--2016)

5.7.8(2015 年 8 月)------事务粒度 InnoDB 只读模式优化:

  • 优化了只读事务(START TRANSACTION READ ONLY)的性能表现。在只读模式启动时,InnoDB 可以跳过创建事务对象的部分开销,显著提升了纯查询工作负载的吞吐量。

5.7.11(2016 年 2 月)------临时目录分离:

  • 引入了 innodb_tmpdir 参数,允许 DBA 为 Online ALTER TABLE 等操作单独指定临时目录,避免因 tmpdir 所在文件系统空间不足导致 DDL 操作失败。

2.3 MySQL 5.7.14 到 5.7.21:运维友好化阶段(2016--2018)

5.7.14(2016 年 7 月)------AIO 优化与 I/O 能力精细化控制:

  • 针对 Linux 系统上的异步 I/O(AIO)行为进行了优化,增强了 innodb_io_capacity 参数的控制效果,使 InnoDB 能够更好地适配不同性能等级的存储设备。
  • innodb_io_capacity_max 的默认值从 2000 调整至 200000,以更好地适应当代 SSD 设备。

5.7.16(2016 年 10 月)------Buffer Pool Dump 功能的深度完善:

  • 修复了在特定条件下 Buffer Pool 转储/加载过程中可能出现的元数据不一致问题。
  • 加强了 innodb_buffer_pool_load_at_startup 参数的行为确定性,服务器启动时会尽可能从 ib_buffer_pool 文件恢复缓冲区状态,在 5.7.16 版本中这一机制得到了充分稳定。

5.7.18(2017 年 4 月)------InnoDB 表空间加密正式 GA:

  • InnoDB 表空间加密功能从实验性阶段正式进入 GA(通用可用性)。借助 keyring_plugin,支持对独立表空间(.ibd 文件)进行透明数据加密(TDE),满足行业合规要求。

5.7.21(2018 年 1 月)------并行读取优化:

  • 改进了 InnoDB 在特定查询模式下的并行读取能力,为后续 MySQL 8.0 中更系统的并行查询(Parallel Query)在代码层面奠定了部分基础。

2.4 MySQL 5.7.22 到 5.7.28:精细调优与稳定性(2018--2019)

5.7.22(2018 年 4 月)------Change Buffer 调度优化与热点页淘汰策略调整:

  • 改进了 Change Buffer 的合并触发机制,合并策略引入了更精细的判断条件,减少了因合并操作导致的 I/O 突发峰值。

5.7.23(2018 年 7 月)------临时表空间的可控性增强:

  • innodb_temp_data_file_path 参数的配置方式更加灵活,允许 DBA 为临时表空间设定最大尺寸限制,有效避免了 ibtmp1 因复杂查询导致的无限膨胀问题。

2.5 MySQL 5.7.35 到 5.7.44:生命末期的稳定性修复(2021--2023)

5.7.35(2021 年 7 月)------崩溃恢复逻辑加强:

  • 针对 Redo Log 和 Undo 在特定崩溃组合场景下的恢复逻辑进行了加固,修复了若干可能导致崩溃恢复后数据不一致的极端场景。

5.7.44(2023 年 10 月)------最终告别:

  • 作为 MySQL 5.7 系列的最终版本发布,版本中包含大量累积的 bug 修复和安全性更新。
  • Oracle 明确公告:"MySQL 5.7 用户被鼓励升级到最新的 MySQL 8.0、8.4 或 MySQL Innovation 版本"。
  • 2023 年 10 月 31 日,MySQL 5.7 正式结束扩展支持(EOL)。

三、MySQL 8.0 各版本细粒度演进:从架构重构到功能成熟

MySQL 8.0 才是真正的"分水岭"。与 5.7 采取"原地修补"策略不同,8.0 从底层对 InnoDB 架构进行了大规模重构。

3.1 MySQL 8.0.0 到 8.0.4:里程碑版与候选发布阶段(2016--2018)

8.0.0(2016 年 9 月)------事务数据字典首次亮相:

  • 引入事务性数据字典(Transactional Data Dictionary),将所有数据库对象的元数据集中存储在 InnoDB 引擎的表中,存放于 mysql.ibd 表空间。
  • .frm 文件开始退出历史舞台。
  • 原子 DDL 的基础由此奠基:DDL 操作(CREATE、ALTER、DROP 等)现在可以作为一个原子事务进行提交或回滚,避免了 DDL 执行失败时产生的元数据不一致和"孤儿文件"问题。

8.0.1(2016 年 11 月)------自增主键持久化实现:

  • 自增主键(Auto-Increment)计数器从仅内存维护改为持久化存储,确保服务器重启后自增值不再基于 max_id 重新推测,而是从确切的持久化数值继续。

8.0.2(2017 年 2 月)------Undo 表空间正式独立:

  • innodb_undo_tablespaces 默认值被设为 2,开始默认启用独立的 Undo 表空间。
  • 此前在 MySQL 5.7 中,该参数默认值为 0,即 Undo 仍存储在 ibdata1 中。

8.0.3(2017 年 4 月)------Redo Log 无锁写入:

  • 对 Redo Log 进行了重大优化,允许多个用户线程同时写入 Redo Log Buffer,大幅降低了高并发场景下的事务日志写入延迟。

8.0.4(2017 年 6 月)------临时表引擎变革(MEMORY → TempTable):

  • 默认内存临时表存储引擎从 MEMORY 变更为 TempTable 引擎,支持以变长方式存储 VARCHAR、VARBINARY 字段。

3.2 关键里程碑:MySQL 8.0.11(2018 年 4 月)------正式 GA

8.0.11 是 MySQL 8.0 的正式 GA(通用可用性)版本。至此,过去数年在里程碑版中完成的所有底层重构都达到了生产环境可用的成熟度。主要稳定和集成的功能如下:

  • 事务数据字典的完整性和崩溃安全性得到全面验证。
  • 原子 DDL 的行为在所有 DDL 场景下得到了统一。
  • Redo Log 无锁写入达到稳定状态。
  • Undo 表空间的独立存储架构得到正式启用。

8.0.11 的稳定化意义: 将此前长达两年的里程碑版(8.0.0 至 8.0.4)中所有尝试性重构转变为稳定、可预测的生产级能力,成为 MySQL 历史上最深刻的一次底层架构升级。

3.3 MySQL 8.0.12 到 8.0.15:功能补充与性能优化(2018--2019)

8.0.13(2018 年 10 月)------TempTable 引擎支持 BLOB、Doublewrite Buffer 参数精细化:

  • TempTable 引擎开始支持 BLOB 类型字段,使复杂查询中产生的内存临时表不再被迫回落到磁盘,显著提升了某些 OLAP 场景的性能。
  • innodb_doublewrite_pagesinnodb_doublewrite_batch_size 参数允许对双写缓冲区的页写入行为进行细粒度控制,在 SSD 设备上可以优化写入吞吐量。
  • 此外,开始引入了对并行查询执行的部分基础框架。

8.0.14(2019 年 1 月)------SQL 级 Undo 表空间管理:

  • 支持通过 SQL 语句(CREATE UNDO TABLESPACEALTER UNDO TABLESPACEDROP UNDO TABLESPACE)在运行时动态管理 Undo 表空间,DBA 不再需要依赖静态配置文件。
  • innodb_undo_tablespaces 参数开始被弃用,始终为 2。

8.0.15(2019 年 2 月)------死锁检测可控化:

  • 引入 innodb_deadlock_detect 参数,允许在高并发场景下关闭死锁检测以提升性能,适用于能够通过应用层规避死锁的业务场景。

3.4 MySQL 8.0.16 到 8.0.19:加密、并行与 I/O 优化(2019--2020)

8.0.16(2019 年 4 月)------系统表空间加密与 innodb_dedicated_server

  • 支持对 mysql 系统表空间(即数据字典的存储位置)进行加密,使全实例级别的数据加密成为可能,满足更高等级的安全合规要求。
  • 引入了 innodb_dedicated_server 参数,当 MySQL 运行在独占服务器上时,可根据服务器内存自动推导 innodb_buffer_pool_sizeinnodb_log_file_sizeinnodb_flush_method 的最优值。

8.0.17(2019 年 7 月)------多线程 Page Cleaner 增强:

  • 多线程 Page Cleaner 的调度逻辑得到显著优化,刷脏操作的并发度和实时性均得到提升。

8.0.19(2020 年 2 月)------InnoDB ReplicaSet 与 REDO 归档:

  • InnoDB ReplicaSet 正式 GA,提供了一种更轻量级的 MySQL 高可用部署方案,基于异步复制和 MySQL Shell 进行管理。

3.5 MySQL 8.0.20 到 8.0.25:双写缓冲区独立化与 InnoDB 加速(2020--2021)

8.0.20(2020 年 4 月)------双写缓冲区从 ibdata1 中独立:

  • 将 Doublewrite Buffer 的存储位置从系统表空间 ibdata1 移出,驻留在独立的双写文件中(#ib_16384_0.dblwr)。
  • 这一改进 极大降低了写延迟,提升了写入吞吐量,并在双写缓冲区页的放置方面提供了灵活性。
  • 深远意义 :这是 MySQL 在 9.7 中使用 Atomic I/O 完全替代 Doublewrite Buffer 之前的关键过渡步骤------双写缓冲区摆脱了对 ibdata1 的依赖,为后续彻底移除埋下了关键伏笔。
  • 与此同时,Hash Join 能力进一步增强,支持半连接、反连接和外连接。

8.0.21(2020 年 7 月)------Clone Plugin 稳定化:

  • Clone Plugin 从实验性进入 GA,支持从远程 MySQL 实例快速克隆数据,为 InnoDB Cluster 的自动化节点配置提供了强有力的基础。
  • 重构了表空间发现机制,改进 .isl 文件处理逻辑。

8.0.22(2020 年 10 月)------Instant DDL 支持 ADD COLUMN:

  • 开始支持 Instant DDL 特性,在执行 ADD COLUMN 操作时,InnoDB 不再需要重建整个表,只需修改数据字典即可完成,使加列操作近乎瞬时完成,即使在超大表上也是如此。

8.0.23(2021 年 1 月)------InnoDB 全文本索引性能增强:

  • 对 InnoDB 全文本索引(Full-Text Index)的性能进行了显著优化,包括索引创建速度的提升和检索效率的改善。

3.6 MySQL 8.0.26 到 8.0.29:并行 DDL 与性能顶峰(2021--2022)

8.0.27(2021 年 9 月)------并行 DDL:十年的标志性突破

  • 引入了 innodb_ddl_threads 参数(默认为 4),控制 InnoDB 在创建或重建二级索引时,用于排序和加载数据的最大并行线程数。
  • 与此配套,引入 innodb_ddl_buffer_size 参数控制 DDL 操作的缓冲区大小。
  • 在 MySQL 近十年的演进中,这是对 DDL 操作进行的最重要的一次性能突破。此前,创建大表的二级索引过程是严格串行的,索引大小和耗时基本呈线性关系;而 8.0.27 中,通过多个 CPU 核心并行处理排序和构建任务,大表创建索引的时间可以被成倍缩短。

8.0.28(2022 年 1 月)------Doublewrite Buffer 的额外优化:

  • 进一步改进了双写缓冲区的性能,针对 NVMe SSD 等高速设备进行了特别优化,进一步降低了双写机制带来的写放大影响。

3.7 MySQL 8.0.30 到 8.0.37:向 8.4 LTS 收敛(2022--2024)

8.0.30(2022 年 7 月)------Redo Log 容量管理重构:

  • 将传统的 innodb_log_file_size + innodb_log_files_in_group 配置方式替换为更直观的 innodb_redo_log_capacity 单一参数,提升了 Redo Log 容量管理的易用性。

8.0.32(2023 年 1 月)------INSTANT DDL 能力扩展:

  • 支持 DROP COLUMN 和修改列数据类型的某些情况以 Instant 方式执行。

8.0.36(2024 年 1 月)------性能稳定性加强:

  • 修复了部分极端并发场景下 InnoDB 锁系统的性能回退问题。

8.0.37 到 8.0.41(2024--2026)------最后的安全和维护版本:

  • 以 Bug 修复和安全更新为主。
  • MySQL 8.0 生命周期的最后阶段,Oracle 将维护重心向 8.4 LTS 和 9.0+ 创新版逐步过渡。

2026 年 5 月 1 日,MySQL 8.0 正式结束扩展支持。

四、演进全景对照表

版本/版本范围 关键 InnoDB 演进里程碑
MySQL 5.7.4(2014.9) 共享临时表空间首次从 ibdata1 独立(ibtmp1),模块化拆分的最早雏形
MySQL 5.7.5(2015.1) Buffer Pool 引入 dump_pct 参数,预热粒度精细化
MySQL 5.7.6(2015.4) 支持 32KB/64KB 页面大小;Online DDL 重构
MySQL 5.7.11(2016.2) 引入 innodb_tmpdir,Online DDL 临时目录可独立指定
MySQL 5.7.14(2016.7) AIO 优化 + innodb_io_capacity 精细化控制
MySQL 5.7.21(2018.1) 并行读取能力初步优化
MySQL 5.7.44(2023.10) 5.7 系列最终版本,正式 EOL
MySQL 8.0.0(2016.9) 事务数据字典首次亮相,原子 DDL 奠基
MySQL 8.0.2(2017.2) Undo 表空间默认启用(2 个),从 ibdata1 中独立
MySQL 8.0.3(2017.4) Redo Log 无锁写入,多线程并发写入 Redo Buffer
MySQL 8.0.4(2017.6) 默认内存临时表从 MEMORY 迁移到 TempTable
MySQL 8.0.11(2018.4) 8.0 正式 GA,数据字典 + 原子 DDL 生产就绪
MySQL 8.0.13(2018.10) TempTable 支持 BLOB;双写缓冲区参数精细化
MySQL 8.0.14(2019.1) SQL 级 Undo 表空间动态管理(CREATE/DROP)
MySQL 8.0.15(2019.2) 死锁检测可在线关闭
MySQL 8.0.16(2019.4) 系统表空间加密;innodb_dedicated_server 自动调优
MySQL 8.0.20(2020.4) 双写缓冲区从 ibdata1 独立到双写文件,写延迟显著降低
MySQL 8.0.22(2020.10) Instant DDL 支持 ADD COLUMN,加列操作近乎瞬时
MySQL 8.0.27(2021.9) 并行 DDL(innodb_ddl_threads 默认 4),十年一遇的 DDL 性能突破
MySQL 8.0.30(2022.7) Redo Log 容量管理简化(innodb_redo_log_capacity
MySQL 8.0.36(2024.1) 锁系统性能稳定性加强
MySQL 8.0.41(2026.2) 8.0 系列最终版本,2026 年 5 月 1 日 EOL
MySQL 8.4.0 LTS(2024.4) 双轨制首个 LTS,承接 8.0 架构成果并做硬件适配调优
MySQL 9.7.0 LTS(2026.4) 成熟模块化架构的最终集成,原子 I/O 替代 Doublewrite

五、结论:八十余个小版本------架构演进的真正载体

MySQL 从 5.7 到 8.0,再到 8.4 LTS 和 9.7 LTS 的十年进化中,真正释放架构能力的 不是任何一个"大版本号"的转变,而是在这 80 余个小版本中逐层深入、逐块拆解的精细工作

  • 5.7 的 40 余个版本完成了"从完全集中式向探索性模块化"的铺垫------临时表空间独立、Buffer Pool 预热精细化、I/O 控制细化。
  • 8.0 的 40 余个版本完成了彻底的重构------事务数据字典(8.0.0)、Undo 独立默认开启(8.0.2)、Redo Log 无锁写入(8.0.3)、双写缓冲区独立(8.0.20)、并行 DDL(8.0.27)......每一步拆解都是架构从"集中耦合"走向"模块化独立"的实质性推进。
  • 8.4 LTS 对 8.0 的全部架构成果完成了安全审查和硬件适配,将其稳定化。
  • 9.0~9.6 创新版对内存和磁盘侧的优化进行了实战打磨(Atomic I/O、Change Buffer 分时限流、Buffer Pool 持久化)。
  • 9.7 LTS 将所有这些积累最终集成到一个高度模块化、硬件自适应的终极架构中。

对于仍停留在 5.7 的用户而言,升级到 9.7 不是在"跨越一个大版本",而是在一次性获取过去十年、八十余个小版本所积累的、层层递进的 全部架构红利