服务器死机/无故宕机排查思路/服务器起不来

1、查看服务器型号

dmidecode -t system

dmidecode | grep 'Product Name'

2、风扇异响:查看BMC,坏了一个风扇其他的所有的风扇会全速转。

3、服务器亮红灯

红灯就是 故障告警 不一定是啥··需要查看BMC口日志。这种就是看bmc日志·· 会有打印的

-问题现象:服务器系统盘亮红灯

-问题原因:系统盘磁盘脚线损坏(系统盘做了raid 1)

-解决方案:①服务器器无法通过control + R进入raid卡页面,通过bios进入可以查看raid情况,显示Need Attention。更换磁盘,磁盘自动重构raid。红灯变黄灯再变绿灯,重构完成,业务恢复正常。

在这里插入图片描述

4、死机问题:

1、确认bmc日志;是否有硬件异常告警;硬件导致死机。

2、查看/var/log/message 日志; 搜关键字command line 是开机时打印,往前即为死机前日志。;

3、主节点optimizi-memory.sh会打印内存回收,若看到每分钟都有drop_caches日志,那说明是内存不足导致死机。 确认该节点部署服务数是否合理、是否技战法导致内存占用问题。

4、未确认的死机问题;需要收集 /var/log/message* 及 /var/log/sa/ 下所有日志,打包保存。

5、重启看系统启动报错。能否进入系统。

messages文件在/var/log/下

/var/log/messages:几乎所有的开机系统发生的错误都会在此记录。

例如:

我的/var/log/下的messages日志文件有

ll|grep messages

-rw------- 1 root root 150 May 17 03:20 messages

-rw------- 1 root root 1396 Apr 25 23:48 messages-20150426

-rw------- 1 root root 1017 Apr 28 17:16 messages-20150503

-rw------- 1 root root 2786 May 6 17:15 messages-20150510

-rw------- 1 root root 972 May 17 01:02 messages-20150517

根据你的需要查看相应的日志

关键字:Command line

还可以看 /usr/kib/cloudmanager/components/lark/log/opt.log

5、自检不通过

可能原因:

①卡内存自检不通过,把内存拔插下

相关推荐
Decay__3 小时前
VMware 安装 SQL Server 双节点 AlwaysOn 可用性组教程 —— WSFC、AG 与侦听器完整部署(系列核心篇)
运维·数据库·sql·mysql·架构
测试界的小码农3 小时前
【Linux 命令实战(06):Linux 文件权限管理,掌握 chmod、chown、chgrp】
linux·运维·服务器
艺杯羹5 小时前
1Panel 装好后 ufw 仍是 inactive:一次服务器安全盲区复盘
服务器·数据库·安全·网络安全·系统架构·实战·1panel
陈希1235 小时前
负载均衡与高可用:LVS、HAProxy、Keepalived 实战
运维·负载均衡·lvs
女神下凡7 小时前
芯参谋(107):杰理AC_中科蓝讯_开发指南
linux·服务器·网络·单片机·嵌入式硬件
落羽的落羽7 小时前
【C++】C++17的主要特性
linux·服务器·开发语言·c++·算法·机器学习
SQL778 小时前
IT运维发展史,一部宏伟史诗
运维·运维发展史
分布式存储与RustFS9 小时前
Terraform 状态文件老在本地丢、并发还撞锁:把 state 锁进 RustFS
运维·云原生·开源·对象存储·分布式存储·s3·性能基准
csdn_aspnet10 小时前
macOS 10 、Docker 玩轉 MySQL
运维·mysql·macos·docker·容器·mac
爱和冰阔落12 小时前
【Linux网络】TCP 半包粘包怎么解决?从长度报头、JSON 拆包到网络计算器完整实战
linux·运维·网络·tcp/ip