SQL-性能优化

(1)插入数据

批量插入:

insert into tb_test values(1, 'Tom'),(2,'Cat'),(3,'jerry');

手动提交事务

start transaction;

insert into tb_test values(1, 'Tom'),(2,'Cat'),(3,'jerry');

insert into tb_test values(4, 'Tom'),(5,'Cat'),(6,'jerry');

insert into tb_test values(7, 'Tom'),(8,'Cat'),(9,'jerry');

commit;

大批量插入数据

如果一次性需要插入大批量数据,使用insert语句插入性能较低,此时可以使用MySQL数据库提供的load指令进行插入,操作如下:

#客户端连接服务端时,加上参数 ---local-infile

mysql --local-infile -u root -p

#设置全局参数local_infile为1,开启从本地加载文件导入数据的开关

set global local_infile=1;

#执行load指令将准备好的数据,加载到表结构中

load data local infile '/root/sql1.log' into table 'tb_user' fields terminated by ',' lines terminated by '\n';

(2)主键优化

页分裂

页可以为空,也可以填充一半,也可以填充100%。每个页包含了2-N行数据(如果一行数据过大,会行溢出),根据主键排列

页合并:

当删除一行记录时,实际上记录并没有被物理删除,只是记录被标记(flaged)为删除并且它的空间变得允许被其他记录声明使用。当页中删除的记录达到MERGE_THRESHOLD(默认为页的50%),InnoDB会开始寻找最靠近的页(前或后)看看是否可以将两个页合并以优化空间使用。

主键设计原则

满足业务需求的情况下,尽量降低主键的长度。

插入数据时,尽量选择顺序插入,选择使用AUTO_INCREMENT自增主键。

尽量不要使用UUID做主键或者是其他自然主键,如身份证号

业务操作时,避免对主键的修改。

(3)order by优化

  1. Using filesort: 通过表的索引或全表扫描,读取满足条件的数据行,然后在排序缓冲区sort buffer中完成排序操作,所有不是通过索引直接返回排序结果的排序都叫filesort排序。

  2. using index: 通过有序索引顺序扫描直接返回有序数据,这种情况即为using index,不需要额外排序,操作效率高。

explain select id, age, phone from tb_user order by age;

explain select id, age, phone from tb_user order by age, phone;

创建age,phone的联合索引

create index idx_user_age_phone on tb_user(age, phone);

创建索引后,再来查看执行计划

explain select id, age, phone from tb_user order by age, phone; 这次变成了using index;

explain select id, age, phone from tb_user order by age, phone desc; 这次变成了backwar index scan; using index

explain select id, age, phone from tb_user order by phone, age; 这次变成了using index, using filesort; 这是因为order by phone, age 违背了最左前缀法则。

a) 根据排序字段建立合适的索引,多字段排序时,页遵循最左前缀法则

b) 尽量使用覆盖索引

c) 多字段排序,一个升序一个降序,此时需要注意联合索引再创建时的规则(ASC/DESC)

d) 如果不可避免的出现filesort,大数据量排序时,可以适当增大排序缓冲区大小sort_buffer_size(默认256k)。

(4)group by优化

表里只有主键索引

explain select profession, count(*) from tb_user group by profession; 使用了临时表,性能很低。

创建索引之后,再来查看性能

create index idx_user_pro_age_sta on tb_user(profession, age, status);

explain select age, count(*) from tb_user where profession='软件工程' group by age; 这是满足最左前缀法则的。

相关推荐
海市公约16 分钟前
MySQL更新语句执行全流程:从Buffer Pool修改到二阶段提交
数据库·mysql·binlog·innodb·undo log·二阶段提交·update执行原理
颂love37 分钟前
MySQL的执行流程
android·数据库·mysql
海市公约1 小时前
一条SQL查询的完整旅程:MySQL执行流程深度解析
sql·mysql·数据库优化·执行计划·连接器·查询缓存·sql执行原理
丷丩1 小时前
三级缓存下MVT地图瓦片服务性能优化策略
算法·缓存·性能优化·gis·geoai-up
程序leo源1 小时前
Qt窗口详解
开发语言·数据库·c++·qt·青少年编程·c#
这个DBA有点耶1 小时前
COUNT进阶:超大表的近似计数与HyperLogLog
数据库·sql·程序人生·学习方法·dba·改行学it
武子康1 小时前
调查研究-138 全球机器人产业深度调研报告【01 篇】:市场规模、竞争格局与商业化成熟 2026
服务器·数据库·ai·chatgpt·机器人·具身智能
zhojiew2 小时前
在本地PostgreSQL使用pgvector构建生成式 AI 应用的实践
数据库·人工智能·postgresql
Yushan Bai2 小时前
EXADATA X5数据库一体机节点login: failure forking: Cannot allocate memory问题处理
数据库·oracle·vr
小短腿的代码世界2 小时前
Qwt性能优化实战:从源码架构到百万级数据点的实时渲染优化
信息可视化·性能优化·架构