通过数据库日志获取数据库中的慢SQL

文章目录

环境

系统平台:N/A

版本:6.0,5.6.5,5.6.4,5.6.3,5.6.1,4.5.2,4.5,4.3.4.9,4.3.4.8,4.3.4.7,4.3.4.6,4.3.4.5,4.3.4.4,4.3.4.3,4.3.4.2,4.3.4,4.7.8,4.7.7,4.7.6,4.7.5,4.3.2,4.1.1

文档用途

本文介绍了如何通过设置数据库日志获取数据库中执行较慢的SQL语句。

详细信息

首先,修改配置文件postgresql.conf,设置以下参数,修改完成后,需重启数据库

#开启日志记录

logging_collector = on

#设置日志输出格式,格式有stderr(默认), csvlog , syslog

log_destination = 'csvlog'

#设置日志存放位置,下面设置表示日志存放在$PGDATA下hgdb_log日志中

log_directory = 'hgdb_log'

#设置日志截断

log_truncate_on_rotation = on

#设置日志的名称

log_filename = 'highgodb_%d.log'

#设置跟踪的SQL语句级别,级别包含none(默认,只记录出错信息), ddl, mod, all

log_statement = all

#记录执行超过以下时间的SQL语句,单位毫秒

log_min_duration_statement = 5000

注:

日志保留时间通过日志名称控制,设置如下

log_filename = 'postgresql-%I.log' #最多保存12小时的日志,每小时一个文件

log_filename = 'postgresql-%H.log' #最多保存24小时的日志,每小时一个文件

log_filename = 'postgresql-%w.log' #最多保存一周的日志,每天一个文件

log_filename = 'postgresql-%d.log' #最多保存一个月的日志,每天一个文件

log_filename = 'postgresql-%j.log' #最多保存一年的日志,每天一个文件

创建日志分析用表

CREATE TABLE hgdb_log

( log_time timestamp(3) with time zone,

user_name text,

database_name text,

process_id integer,

connection_from text,

session_id text,

session_line_num bigint,

command_tag text,

session_start_time timestamp with time zone,

virtual_transaction_id text,

transaction_id bigint,

error_severity text,

sql_state_code text,

message text,

detail text,

hint text,

internal_query text,

internal_query_pos integer,

context text,

query text,

query_pos integer,

location text,

application_name text,

PRIMARY KEY (session_id, session_line_num)

);

将日志文件导入数据

COPY hgdb_log FROM '/path/to/logfile.csv' WITH csv;

使用SQL对日志进行分析,示例如下

按执行时间由长到短排序

select log_time,database_name,user_name,application_name,substr(message, 7,8),message from hgdblog where message like '%执行时间%' order by substr(

相关推荐
weelinking8 小时前
【产品】00_产品经理用Claude实现产品系列介绍
数据库·人工智能·sql·数据挖掘·github·产品经理
2301_803934619 小时前
Go语言如何做网络爬虫_Go语言爬虫开发教程【指南】
jvm·数据库·python
秋99 小时前
windows中安装redis
数据库·redis·缓存
Cosolar10 小时前
万字详解:RAG 向量索引算法与向量数据库架构及实战
数据库·人工智能·算法·数据库架构·milvus
想唱rap10 小时前
IO多路转接之poll
服务器·开发语言·数据库·c++
SeaTunnel10 小时前
AI 让 SeaTunnel 读源码和调试过时了吗?
大数据·数据库·人工智能·apache·seatunnel·数据同步
凯瑟琳.奥古斯特10 小时前
数据冗余与规范化的本质[数据库原理]
开发语言·数据库·职场和发展
_ku_ku_11 小时前
数据库系统原理 · SQL 数据定义、更新及数据库编程 · 自学总结
数据库·oracle
Mortalbreeze11 小时前
深度理解文件系统 ---- 从磁盘存储到内核存储
大数据·linux·数据库
2301_8039346111 小时前
MySQL 字段类型选择规范指南
jvm·数据库·python