MySQL分区(Partition)实战指南

分区优势

  1. 管理大表:当单表数据达到数亿行、几十 GB 以上时,用分区能把数据分散到多个逻辑/物理单元,易维护。

  2. 提高查询性能(在能走分区剪枝时):针对分区键的查询可只扫描少数分区(Partition Pruning),显著减少 IO。

  3. 快速归档/删除 :删除旧数据可以通过 DROP PARTITION 或 EXCHANGE PARTITION 实现"常数时间"删除,而不用 DELETE 全表扫描。

  4. 并行化/并发:某些存储引擎/环境下分区可促进并行 I/O(不是万能的)。

  5. 局部重建/维护 :可以对单个分区做 OPTIMIZE、备份、恢复,降低维护成本。

分区示例

sql 复制代码
-- 创建订单表,并按 created_at 字段按年份分区
CREATE TABLE orders (
  id BIGINT NOT NULL AUTO_INCREMENT,
  user_id INT NOT NULL,
  created_at DATE NOT NULL,
  amount DECIMAL(10,2),
  -- 必须包含分区列在主键中
  PRIMARY KEY (id, created_at) 
)
PARTITION BY RANGE COLUMNS(created_at) (
  PARTITION p2022 VALUES LESS THAN ('2023-01-01'),
  PARTITION p2023 VALUES LESS THAN ('2024-01-01')
);

-- 插入数据
INSERT INTO orders (user_id, created_at, amount) 
VALUES 
  (1, '2022-03-10', 100.00),
  (2, '2022-06-15', 250.50),
  (3, '2023-01-22', 120.75),
  (4, '2023-08-09', 350.25);

-- 查看表信息
SHOW CREATE TABLE orders

-- 为 2025 年的数据添加分区
-- LESS THAN = 分区接收"所有小于某个值"的数据
ALTER TABLE orders 
ADD PARTITION (PARTITION p2025 VALUES LESS THAN ('2026-01-01'));

-- 插入 2025 年的数据(如果2025年的分区还没有创建好,数据不能进入特定的分区)
-- 添加会报错 ERROR 1526 (HY000): Table has no partition for value ...
INSERT INTO orders (user_id, created_at, amount)
VALUES 
  (6, '2025-02-10', 450.00),
  (7, '2025-03-20', 300.00);
  
  -- 删除 2022 年的分区(删除2022年分区的时候,2022年的数据也会被删除)
ALTER TABLE orders 
DROP PARTITION p2022;

-- 查询 2023 年的数据
SELECT * FROM orders 
WHERE created_at BETWEEN '2023-01-01' AND '2023-12-31';

Java实现分区

1.创建一个定时器(每天定时查询分区是否存在,不存在则创建分区)

java 复制代码
    @XxlJob("AUTO_CREATE_PARTITION")
    public void autoCreatePartition() {
        businessUserRecallReachService.autoCreatePartition();
    }

2.查询分区是否存在

java 复制代码
select partition_name from information_schema.partitions
where table_name='business_user_recall_reach_record' and partition_name=#{partitionName} limit 1

3.不存在,创建分区

java 复制代码
ALTER TABLE business_user_recall_reach_record add PARTITION (PARTITION ${partitionName}  VALUES LESS THAN (${partitionDate}))

代码:

java 复制代码
    /**
     * 初始化按月分区
     *
     * @param model 数据模型
     */
    private void initializeMonthPartition(Class<?> model) {
        LocalDate now = LocalDate.now();
        String name = "p" + DateUtils.month2number(now.plusMonths(1));
        String value = now.plusMonths(2).format(DateTimeFormatter.ofPattern("yyyy-MM-01"));
        String table = SQLUtils.unquote(TableInfoHelper.getTableInfo(model).getTableName());
        if (!this.baseMapper.hasPartition(table, name)) {
            this.baseMapper.addPartition(table, name, value);
        }
    }
相关推荐
TDengine (老段)17 小时前
TDengine TSDB 实战排障四(升级与兼容)
android·java·大数据·数据库·物联网·时序数据库·tdengine
小小龙学IT17 小时前
Go 泛型(Generics)深度解析:从类型参数到生产实践
开发语言·数据库·golang
这个DBA有点耶17 小时前
分区表深入:分区裁剪失效的6种场景、分区锁机制与维护实战
数据库·mysql·dba
蓝速科技17 小时前
政务自助终端信创选型与无人值守落地方案
android·大数据·数据库·人工智能·科技·技术分享·政务
粤鼎恒业17 小时前
惠州工厂电子料回收厂家推荐:从交接单反推筛选标准
大数据·数据库·算法·硬件架构·硬件工程·pcb工艺·材料工程
ShineWinsu18 小时前
对于Redis:Redis的认识以及分布式系统的解析
linux·数据库·c++·redis·缓存·消息队列·分布式架构
SelectDB18 小时前
ELK 做不了的分析,我用 Doris 物化视图补上了:配置、开关与四个排错现场
大数据·数据库·数据分析
SelectDB18 小时前
Agent 日志检索慢、存储还贵?search() + VARIANT 的落地命令和几个当场踩出来的问题
大数据·数据库·数据分析
SelectDB18 小时前
ClickHouse 存日志踩过的并发坑:压测脚本、检索写法与排错命令
大数据·数据库·数据分析
龙腾AI白云18 小时前
AI微调技术:让通用大模型精准适配垂直行业
数据库·人工智能·机器学习·flask·scikit-learn