DeekSeek辅助总结PostgreSQL Mistakes and How to Avoid Them 的一个例子

原文地址:https://www.postgresql.org/docs/books/

假设你有一个包含数十万条客户支持工单的表,其模型如下(过度简化):

sql 复制代码
CREATE TABLE support.tickets (id int, content text, status smallint);

对于我们的示例数据,我们假设工单的状态 status = 10 表示"开放",status = 20 表示"已关闭"。让我们插入几十万行已关闭的工单:

sql 复制代码
INSERT INTO support.tickets
SELECT id, 'case description text', 20
FROM generate_series(1, 499750) AS id;

现在再插入几百行最近的、仍处于开放状态的工单:

sql 复制代码
INSERT INTO support.tickets
SELECT id, 'case description text', 10
FROM generate_series(499751, 500000) AS id;

为了简单起见,我们假设并行化不可能实现,因此我们通过以下命令禁用它:

sql 复制代码
SET max_parallel_workers_per_gather = 0;

我们将通过启用 psql 中的计时功能来跟踪查询持续时间:

sql 复制代码
\timing
计时已开启。

现在假设对于你的客户支持应用程序,只有开放工单是相关的。因此,你希望计算有多少个开放工单,因为你只关心这些。让我们尝试以下操作。

尝试解决问题

sql 复制代码
SELECT count(*)
FROM support.tickets
WHERE status = 10;

确实,这个开放工单计数返回了正确结果。但它很慢:

sql 复制代码
count
-------
   250
(1 行)

耗时:110.036 ms

让我们通过运行 EXPLAIN 来看看为什么它慢,EXPLAIN 会向我们展示PostgreSQL将如何执行查询(查询计划):

sql 复制代码
EXPLAIN SELECT count(*)
FROM support.tickets
WHERE status = 10;
                           查询计划
----------------------------------------------------------------
 Aggregate  (成本=9927.28..9927.29 rows=1 width=8)
   ->  在 tickets 上的顺序扫描 (成本=0.00..9927.28 rows=1 width=0)
         过滤器: (status = 10)
(3 行)

这告诉我们,为了运行聚合 count(),PostgreSQL 计划在 tickets 表上使用顺序扫描,然后通过 status = 10 来过滤结果。顺序扫描(也称为全表扫描)很慢。所以你想,我来创建一个索引。索引能让一切变快,对吧?

sql 复制代码
CREATE INDEX ON support.tickets(status);
CREATE INDEX
耗时:732.403 ms

现在索引已经创建,我们再试一次:

sql 复制代码
SELECT count(*)
FROM support.tickets
WHERE status = 10;
 count
-------
   250
(1 行)

耗时:3.715 ms

这下好多了。EXPLAIN 会确认为什么现在快得多:它使用了仅索引扫描:

sql 复制代码
                                  查询计划
----------------------------------------------------------------------------
 Aggregate  (成本=4.44..4.45 rows=1 width=8)
   ->  仅索引扫描使用 tickets_status_idx 在 tickets
   ↪(成本=0.42..4.44 rows=1 width=0)
         索引条件: (status = 10)
(3 行)

然而,这个索引相当大。

为什么这个不行?

sql 复制代码
\x
\di+ support.tickets*
关系列表
-[ 记录 1 ]-+-------------------
模式        | support
名称        | tickets_status_idx
类型        | 索引
拥有者      | frogge
表          | tickets
持久性      | 永久
访问方式    | btree
大小        | 3408 kB
描述        |

想象一下,你的客户支持历史中有数亿条工单,但同一时间只有大约最新的250条是开放的。大索引当然会占用更多磁盘空间。但它们的速度也更慢,因为有更多数据需要遍历,并且它们会减慢写入操作,因为每次 INSERT 或 UPDATE 都需要更新它们。

在我们的案例中,我们只关心相对较少的开放工单。因此,我们可以通过使用所谓的部分索引来节省索引大小,只包含我们感兴趣的行:WHERE status = 10。

我们现在删除之前的索引,并创建一个新的部分索引。

正确的解决方案

sql 复制代码
DROP INDEX support.tickets_status_idx;
CREATE INDEX ON support.tickets(status)
WHERE status = 10;

看看这个索引现在小了多少!这是有道理的,因为我们只索引了总行数的大约 0.05%,对吧?

sql 复制代码
\di+ support.tickets*
关系列表
-[ 记录 1 ]-+-------------------
模式        | support
名称        | tickets_status_idx
类型        | 索引
拥有者      | frogge
表          | tickets
持久性      | 永久
访问方式    | btree
大小        | 16 kB
描述        |

这展示了在将索引大小减少了200多倍之后,现在的执行时间看起来如何:

sql 复制代码
SELECT count(*)
FROM support.tickets
WHERE status = 10;
 count
-------
   250
(1 行)

耗时:0.762 ms

EXPLAIN 现在显示如下:

sql 复制代码
                                  查询计划
----------------------------------------------------------------------------
 Aggregate  (成本=4.16..4.17 rows=1 width=8)
   ->  仅索引扫描使用 tickets_status_idx 在 tickets
   ↪(成本=0.14..4.16 rows=1 width=0)
(2 行)

操作仍然是仅索引扫描,但使用的是小得多的索引,因此执行所需时间也少得多。

所以,我们已经看到,简单地在列上放置一个索引在技术上可行,但当你考虑到大数据量和性能要求等因素时,这并不是最优的解决方案。

相关推荐
DFT计算杂谈4 小时前
交错磁研究进展材料物性与交叉应用
数据库·人工智能·python·opencv·算法
IvorySQL5 小时前
PG 日报|查询优化器重大修复,支持更多复杂 SQL 优化
数据库·人工智能·postgresql·开源
写代码的强哥6 小时前
TiDB 和 OceanBase 对比:架构师视角下的企业选型实战指南
数据库·云原生·架构
金融小白数据分析之路7 小时前
绍兴市镇街echarts 制作
前端·数据库·echarts
桐薇全肯定7 小时前
MySQL学生成绩管理系统实战操作
java·数据库·sql
倒流时光三十年7 小时前
第一阶段 01.Elasticsearch 核心概念与 PostgreSQL 对照
大数据·elasticsearch·postgresql
hellojike8 小时前
free-stockdb本地金融数据库核心设计
数据库·金融
井川廊咏8 小时前
初探性能优化——2个月到4小时的性能提升
jvm·数据库·性能优化
这个DBA有点耶8 小时前
热点行更新:秒杀场景下一条UPDATE语句的锁等待与性能优化
数据库·sql·mysql·性能优化·database·dba
在水一缸8 小时前
深入浅出:Node.js 下一代 ORM 架构设计与实战解析
数据库·微服务·云原生·node.js·orm·架构设计