大数据之LibrA数据库系统告警处理(ALM-12027 主机PID使用率超过阈值)

告警解释

系统每30秒周期性检测PID使用率,并把实际PID使用率和阈值进行比较,PID使用率默认提供一个阈值。当检测到PID使用率超出阈值时产生该告警。

平滑次数为1,主机PID使用率小于或等于阈值时,告警恢复;平滑次数大于1,主机PID使用率小于或等于阈值的90%时,告警恢复。

告警属性
告警ID 告警级别 可自动清除
12027 严重
告警参数
参数名称 参数含义
ServiceName 产生告警的服务名称。
RoleName 产生告警的角色名称。
HostName 产生告警的主机名。
Trigger Condition 系统当前指标取值满足自定义的告警设置条件。
对系统的影响

无法分配PID给新的业务进程,业务进程不可用。

可能原因
  • 节点同时运行的进程过多,需要扩展pid_max值。
  • 系统环境异常。
处理步骤

扩展pid_max值。

  1. 打开FusionInsight Manager页面,在实时告警列表中,单击此告警。在"告警详情"区域,获取告警所在主机IP地址。

  2. 使用PuTTY工具,以root用户登录告警所在主机。

  3. 执行命令cat /proc/sys/kernel/pid_max,查看系统当前运行的PID最大值pid_max。

  4. 若PID使用率超过阈值,将pid_max值增大一倍,执行命令echo 新pid_max > /proc/sys/kernel/pid_max

    示例:echo 65536 > /proc/sys/kernel/pid_max

  5. 等待5分钟,检查该告警是否恢复。

    • 是,处理完毕。
    • 否,执行[步骤 6](#步骤 6)。

检查系统环境是否异常。

  1. 联系操作系统维护人员,检查操作系统是否存在异常。

    • 是,恢复操作系统故障,执行[步骤 7](#步骤 7)。
    • 否,执行[步骤 8](#步骤 8)。
  2. 等待5分钟,检查该告警是否恢复。

    • 是,处理完毕。
    • 否,执行[步骤 8](#步骤 8)。

收集故障信息。

  1. 在主集群的FusionInsight Manager界面,单击"系统设置 > 日志下载"。
  2. 在"服务"下拉框中勾选"所有服务",单击"确定"。
  3. 设置日志收集的"开始时间"和"结束时间"分别为告警产生时间的前后30分钟,单击"下载"。
相关推荐
Acrelhuang17 分钟前
筑牢用电防线:Acrel-1000 自动化系统赋能 35kV 园区高效供电-安科瑞黄安南
java·大数据·开发语言·人工智能·物联网
无聊的小坏坏18 分钟前
Select 服务器实战教学:从 Socket 封装到多客户端并发
服务器·select·io多路复用
Elastic 中国社区官方博客18 分钟前
使用 Mastra 和 Elasticsearch 构建具有语义回忆功能的知识 agent
大数据·数据库·人工智能·elasticsearch·搜索引擎·ai·全文检索
qq_2546744122 分钟前
华为交换机上配置基于 IP 地址的 ACL
网络
一勺菠萝丶26 分钟前
芋道后端部署后总自己挂?从 Nginx 报错到 OOM Kill 的完整排查与修复(2核2G 服务器实战)
服务器·chrome·nginx
新手小白*30 分钟前
Elasticsearch+Logstash+Filebeat+Kibana部署【7.1.1版本】
大数据·elasticsearch·搜索引擎
宁雨桥33 分钟前
WebSocket 核心 API 速查表
网络·websocket·网络协议
梁正雄38 分钟前
linux服务-Bonding网卡绑定工具
linux·运维·linux bonding·网卡绑定
云边有个稻草人42 分钟前
Windows 里用 Linux 不卡顿?WSL + cpolar让跨系统开发变简单
linux·运维·服务器·cpolar
打不了嗝 ᥬ᭄44 分钟前
【Linux】网络层协议
linux·网络·c++·网络协议·http