aio-max-nr达到上限导致数据库性能问题

问题说明:

rac数据库节点一表面上看由于归档等待事件导致业务性能问题。

问题分析过程:

查看awr报告top事件,等待事件主要为归档切换问题:

查看事件,归档等待达到20多分钟

检查节点alert日志发现,最早12点53分49秒就有归档失败报错,如下:

到13:19:39的时候,发生了所有online logs需要归档,导致数据库等待归档事件,如下:

查看最早发生归档异常时间段的trace日志,如下图:

在告警中,报asynch I/O内核限制,主要是由于异步IO请求达到AIO-MAX-NR的上限。

查看当前内核参数配置,cat /etc/sysctl.conf,如下图:

结论及解决:

结论分析

异步IO请求达到AIO-MAX-NR的上限,导致后续文件句柄不能生成,不能打开新的文件,所以导致归档不能打开写入到本地。

解决方案

  1. 优化内核参数,建议调整如下参数:

调整fs.aio-max-nr为当前1.5倍,并同时调整file-max、fs.aio-nr为当前1.5倍,fs.aio-nr没有设置,可以通过"sysctl -a|grep aio"命令查看当前的fs.aio-nr配置,具体设置值参考如下:

fs.aio-max-nr = 4718592

fs.file-max = 10223616

使用"sysctl -p"使参数生效。

aio-max-nr :允许的并发请求的最大个数,一是来自网络的I/O;二是对文件(设备)的I/O。

对于服务器程序,I/O是制约系统性能最关键的因素。对于需要处理大量连接的高并发服务器程序,异步I/O几乎是不二的选择。

相关推荐
TDengine (老段)1 小时前
TDengine IDMP 功能点—数据接入
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
索西引擎1 小时前
MySQL 进阶:视图、存储过程、存储函数与触发器
数据库·mysql
bksczm3 小时前
InnoDB 通用表空间与临时表空间详解
大数据·数据库·mysql
靠沿3 小时前
MySQL数据库进阶——存储过程和触发器
java·数据库·mysql
码少女4 小时前
MySQL--库与表的增删改查基础
java·数据库·mysql
Eyfcom4 小时前
〖物流 SaaS 实战 02〗SaaS 租户的计费与订阅模型:从“一锤子买卖”到“按需订阅”
linux·服务器·数据库·快递系统·物流saas实战
打工的小王5 小时前
postgresql和mysql对比
数据库·mysql·postgresql
数据库急诊室_阿哲6 小时前
一次割接后的性能复核记录:基线、样本、回滚点
运维·数据库·dba
保利威视频SaaS小张7 小时前
企业直播接入笔记 12|企业内训直播怎么做签到和学时统计,防挂机这件事比想象中难
java·前端·数据库·笔记·视频云·polvy·polyv
顧棟8 小时前
【ES实战】 索引模板「可追溯、可校验」:一种模板治理的工程化思路
java·数据库·elasticsearch