Java项目常用数据归档方式

sql归档

insert into 归档表 select * from待归档表,

这种归档方式速度极快,原因有五

1.无网络往返,数据在服务端直接从源表读取写入目标表,不需要将数据传回客户端,避免网络io,

2.最小化日志,在某些数据库中可以使用批量日志模式,比逐行insert产生的redo/undo日志少的多,

3.无解析优化开销,解析和执行计划只做一次,而逐行insert都要解析,

4.批量io,数据库引擎以大块单位读写,属于顺序io,远快于随机io,

5.无索引维护逐行代价,目标表的索引更新可以批量合并,而非逐行维护

手动分区归档

1.主要步骤

创建分区表,一般按照时间范围,

create table order(

id integer,

order_time timestamp,

...

)partition by range (order_time)

创建月度分区

create table order_2026_01 partition of order for values from(2026-01-01)to (2026-02-01)

需要定期创建分区表

归档旧分区

方式一,betach分区后导出归档

alter table order betach partition order_2026_01;

导出为文件存入冷库存

copy order_2026_01 to "/archive/order_2026_01.csv"

删除已归档分区

delete table order_2026_01,

方式二

betach后保留为普通表(仍在线但不算分区)

alter table order betach partition order_2026_01

4.临时挂载回查

alter table order attach partition order_2026_01 for values from (2026-01-01)to (2026-02-01)

优势:

1.归档快,秒级完成,整个分区操作,

2.无锁表

3.主库可控,旧分区可直接drop

4.回查方便

5.分区裁剪自动跳过不相关分区

相关推荐
L00110 小时前
MySQL5.7 DATE 字段无法设置默认日期?用触发器搞定|个人任务清单项目实战
mysql
不像程序员的程序媛12 小时前
导出mysql数据结构
数据库·mysql
鱼很腾apoc12 小时前
【MySQL】第4期 用户管理与 C 语言连接编程详解
linux·服务器·c语言·mysql·connector/c
郭萌69613 小时前
多商户平台的分销佣金:为什么同一笔订单,换个时间跑会算出另一个人
mysql·php
库库的数据库笔记14 小时前
金融核心交易系统的数据库国产信创改造该如何做?
大数据·数据库·分布式·mysql·oracle·金融·数据库架构
Linux实战笔记14 小时前
MySQL 索引失效的三种典型场景与 EXPLAIN 分析
mysql·索引失效·explain·执行计划·sql 调优
这个DBA有点耶14 小时前
连接数没满,应用却连不上数据库——TCP backlog溢出与somaxconn的隐藏限制
数据库·mysql·代码规范
小羊没烦恼!15 小时前
C#综合揭秘——Entity Framework 并发处理详解
java·开发语言·前端·javascript·数据库·mysql·c#
flytalei15 小时前
从 Docker Compose 到 K3s:逐浪博客 MySQL 数据迁移实战与一致性验证
mysql·docker·容器
SL_staff17 小时前
3分钟上线新规则:业务人员拖拽完成合同超期自动暂停服务
java·mysql·全栈