通过数据库日志获取数据库中的慢SQL

文章目录

环境

系统平台:N/A

版本:6.0,5.6.5,5.6.4,5.6.3,5.6.1,4.5.2,4.5,4.3.4.9,4.3.4.8,4.3.4.7,4.3.4.6,4.3.4.5,4.3.4.4,4.3.4.3,4.3.4.2,4.3.4,4.7.8,4.7.7,4.7.6,4.7.5,4.3.2,4.1.1

文档用途

本文介绍了如何通过设置数据库日志获取数据库中执行较慢的SQL语句。

详细信息

首先,修改配置文件postgresql.conf,设置以下参数,修改完成后,需重启数据库

#开启日志记录

logging_collector = on

#设置日志输出格式,格式有stderr(默认), csvlog , syslog

log_destination = 'csvlog'

#设置日志存放位置,下面设置表示日志存放在$PGDATA下hgdb_log日志中

log_directory = 'hgdb_log'

#设置日志截断

log_truncate_on_rotation = on

#设置日志的名称

log_filename = 'highgodb_%d.log'

#设置跟踪的SQL语句级别,级别包含none(默认,只记录出错信息), ddl, mod, all

log_statement = all

#记录执行超过以下时间的SQL语句,单位毫秒

log_min_duration_statement = 5000

注:

日志保留时间通过日志名称控制,设置如下

log_filename = 'postgresql-%I.log' #最多保存12小时的日志,每小时一个文件

log_filename = 'postgresql-%H.log' #最多保存24小时的日志,每小时一个文件

log_filename = 'postgresql-%w.log' #最多保存一周的日志,每天一个文件

log_filename = 'postgresql-%d.log' #最多保存一个月的日志,每天一个文件

log_filename = 'postgresql-%j.log' #最多保存一年的日志,每天一个文件

创建日志分析用表

CREATE TABLE hgdb_log

( log_time timestamp(3) with time zone,

user_name text,

database_name text,

process_id integer,

connection_from text,

session_id text,

session_line_num bigint,

command_tag text,

session_start_time timestamp with time zone,

virtual_transaction_id text,

transaction_id bigint,

error_severity text,

sql_state_code text,

message text,

detail text,

hint text,

internal_query text,

internal_query_pos integer,

context text,

query text,

query_pos integer,

location text,

application_name text,

PRIMARY KEY (session_id, session_line_num)

);

将日志文件导入数据

COPY hgdb_log FROM '/path/to/logfile.csv' WITH csv;

使用SQL对日志进行分析,示例如下

按执行时间由长到短排序

select log_time,database_name,user_name,application_name,substr(message, 7,8),message from hgdblog where message like '%执行时间%' order by substr(

相关推荐
小徐不徐说14 小时前
C++ 接口与插件设计:从工厂注册到 Qt 动态插件
数据库·c++·qt·系统架构·程序设计
论文复现现场14 小时前
WRF、FEA 能用 L40S 加速吗?求解器检查、断点恢复与长期运行
java·数据库·算法·wrf·有限元分析·gpu计算·断点续算
Decay__15 小时前
04_MySQL DBA 日常运维手册 —— 会话管理、锁与阻塞、事务监控、慢查询与日志巡检
运维·数据库·sql·mysql·架构
心梦缘-雪雁17 小时前
SQL Server 查询数据存在哪个表里
数据库
lusklusklusk17 小时前
Python 巡检脚本:进程运行状态、数据库写入时效检查及邮件通知与告警
数据库·python·oracle
GeW18 小时前
产业新优势基础软件的人才底盘,从Linux与数据库开始
linux·数据库
SelectDB18 小时前
Doris Arrow Flight SQL 高速读取协议实战:与 Snowflake 客户端取数链路对照
大数据·数据库·数据分析
曼岛_18 小时前
[图解密码学]第4章 古典密码
java·数据库·密码学
瀚高PG实验室19 小时前
HGDB V9.0.5 .pgpass 免密登录提示 IsEncryptNon-base64 encoding 警告处理
数据库·postgresql·瀚高数据库
龙腾AI白云19 小时前
大模型检索增强生成(RAG)的技术原理与架构设计
数据库·python·机器学习·知识图谱