手搓一个 DELL EMC Unity存储系统健康检查清单

写在前面

对于DELL EMC存储系统Unity的一些深度的健康检查通过Web的Unisphere图形化界面是做不到的,图形化界面只能看到是否有告警,物理的东西是否有问题的,逻辑的Pool和LUN等是否ready,再深入的潜在的问题是查不到的。

另外,在对客户的控制器或者文件系统恢复以后,也需要做一些健康检查确保系统的正常运行。出了常见的使用UEMCLI来检查,还可以使用升级中的pre-upgrade的升级检查,都是很方便的。

但我们之类要share的是如何从底层命令行来做各种的深入健康检查,一些常用的命令,还有一些检查log中的潜在问题的命令。

下面所有的命令都是查询命令,对系统没有任何危害,请放心大胆使用。对了,这些命令有些应该是需要在root权限下运行。有问题就添加vx(StorageExpert)来沟通吧。

0. 基础信息

  • 当前用户/主机名
    whoami
    cat /etc/hostname
  • 系统型号与软件版本
    svc_diag

1. SP 状态检查

  1. 启动模式与服务状态
    get_boot_mode
    ps -e | grep iwd

期望:Normal Mode,且 iwd 存在(fully up)。

  1. 是否为 Primary(仅 Normal 模式)
    ps -e | grep ECOM

期望:ECOM 存在 → Primary。

  1. Boot Control
    svc_boot_control -l

期望:reboot:ON,softdog:ON。

  1. MCC Cache 丢失
    grep -i "CACHE LOST" /EMC/C4Core/log/start_c4.log
    svc_cache -q

期望:无 "CACHE LOST",cache 查询正常。

  1. MCC Cache 未恢复
    下面的三个是在service mode下查询的

grep -i "Waiting for the peer SP" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

grep -i "MCC cache not recovered" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

grep -i "DRAMCache: Valid CDR Image" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

任意命中提示均是cache未恢复。

2. Panic / 安全日志

  • rolling panic / ACL
    svc_dc -lcd
    zgrep -E "panic backtrace.*updateGpoServer" /EMC/C4Core/log/c4_safe_native.log* | head -10

3. 磁盘与重建

  • 磁盘枚举
    c4admintool -c enum_disks
  • 离线与重建记录
    zgrep -E "Disk.*taken offline" /EMC/backend/log_shared/EMCSystemLogFile.*
    zgrep -E "rebuilding due to the loss of a drive|finished rebuilding" /EMC/backend/log_shared/EMCSystemLogFile.*

4. Pool 健康与空间

  • Pool 状态
    MluCli.exe poll -pool | egrep "^Identification_Name |^State_Current_State |^State_Internal_State |^State_Status |^UsableSize |^Consumed Space "
  • Pool 空间不足迹象
    zgrep -E "does not have enough free space available|available space of 0 blocks|has 0 slices available for use" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10

5. LUN 状态与一致性

  • LUN 状态
    MluCli.exe poll -lu | egrep "^Identification_NiceName |^State_External_State |^State_Internal_State |^Status |^Replication Destination |^Host Access "
  • 数据一致性问题
    run_dbg_ext.pl -n mlu | egrep "NiceName|LostExtentCount"
    zgrep -E "FsRpt" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10
    zgrep -E "HasCorruptCrc|Read I/O error due to CRC error" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10

6. 文件系统 (UFS64)

  • 文件系统状态
    MluCli.exe poll -sf | egrep "^Name |^State |^IsMountedReadOnlyToApplyPoolFullPolicy |^State_Status |^Recovery_Flag |^ExportedSize |^SizeUsed |^Thin |^Upper Deck File System Id |^IsReadOnly |^IsReplicationDestination "
  • 挂载检查
    /nas/bin/server_df ALL

7. VDM (NAS Server)

MluCli.exe poll -sfs | egrep "^Name |^State |^State_Status |^Extended Status |^IsReplicationDestination |^IsPacketReflectEnabled "

8. 主机连接问题

zgrep "modified the HLU for host" /EMC/backend/log_shared/EMCSystemLogFile* | head -10

zgrep "iSCSI Authentication Failure" /EMC/backend/log_shared/EMCSystemLogFile* | head -10

grep -E "Can't expand filesystem which doesn't exist|matchedFsId: N/A" /EMC/CEM/log/cemtracer_host.log | head -5

相关推荐
馨谙40 分钟前
vim保姆级使用,操作详解,快捷键大全总结
linux·编辑器·vim
驱动探索者41 分钟前
find 命令使用介绍
java·linux·运维·服务器·前端·学习·microsoft
半路_出家ren1 小时前
IPTables防火墙
服务器·网络·iptables
BruceD_1 小时前
新装 CentOS 7 切换 yum 源完整指南
linux·python·docker·centos·yum
洋哥网络科技1 小时前
Centos系统替代选择
linux·运维·centos
礼拜天没时间.1 小时前
VMware安装虚拟机并且部署 CentOS 7 指南
linux·运维·centos·系统安装
de之梦-御风1 小时前
【MediaMTX】centos 7 安装MediaMTX
linux·运维·centos
领创工作室2 小时前
安卓设备分区作用详解-测试机红米K40
android·java·linux
小晶晶京京2 小时前
day54-Zabbix(第三部分)
linux·运维·服务器·zabbix
数据知道2 小时前
Go基础:用Go语言操作MongoDB详解
服务器·开发语言·数据库·后端·mongodb·golang·go语言