手搓一个 DELL EMC Unity存储系统健康检查清单

写在前面

对于DELL EMC存储系统Unity的一些深度的健康检查通过Web的Unisphere图形化界面是做不到的,图形化界面只能看到是否有告警,物理的东西是否有问题的,逻辑的Pool和LUN等是否ready,再深入的潜在的问题是查不到的。

另外,在对客户的控制器或者文件系统恢复以后,也需要做一些健康检查确保系统的正常运行。出了常见的使用UEMCLI来检查,还可以使用升级中的pre-upgrade的升级检查,都是很方便的。

但我们之类要share的是如何从底层命令行来做各种的深入健康检查,一些常用的命令,还有一些检查log中的潜在问题的命令。

下面所有的命令都是查询命令,对系统没有任何危害,请放心大胆使用。对了,这些命令有些应该是需要在root权限下运行。有问题就添加vx(StorageExpert)来沟通吧。

0. 基础信息

  • 当前用户/主机名
    whoami
    cat /etc/hostname
  • 系统型号与软件版本
    svc_diag

1. SP 状态检查

  1. 启动模式与服务状态
    get_boot_mode
    ps -e | grep iwd

期望:Normal Mode,且 iwd 存在(fully up)。

  1. 是否为 Primary(仅 Normal 模式)
    ps -e | grep ECOM

期望:ECOM 存在 → Primary。

  1. Boot Control
    svc_boot_control -l

期望:reboot:ON,softdog:ON。

  1. MCC Cache 丢失
    grep -i "CACHE LOST" /EMC/C4Core/log/start_c4.log
    svc_cache -q

期望:无 "CACHE LOST",cache 查询正常。

  1. MCC Cache 未恢复
    下面的三个是在service mode下查询的

grep -i "Waiting for the peer SP" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

grep -i "MCC cache not recovered" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

grep -i "DRAMCache: Valid CDR Image" /mnt/ssdroot/EMC/C4Core/log/start_c4.log

任意命中提示均是cache未恢复。

2. Panic / 安全日志

  • rolling panic / ACL
    svc_dc -lcd
    zgrep -E "panic backtrace.*updateGpoServer" /EMC/C4Core/log/c4_safe_native.log* | head -10

3. 磁盘与重建

  • 磁盘枚举
    c4admintool -c enum_disks
  • 离线与重建记录
    zgrep -E "Disk.*taken offline" /EMC/backend/log_shared/EMCSystemLogFile.*
    zgrep -E "rebuilding due to the loss of a drive|finished rebuilding" /EMC/backend/log_shared/EMCSystemLogFile.*

4. Pool 健康与空间

  • Pool 状态
    MluCli.exe poll -pool | egrep "^Identification_Name |^State_Current_State |^State_Internal_State |^State_Status |^UsableSize |^Consumed Space "
  • Pool 空间不足迹象
    zgrep -E "does not have enough free space available|available space of 0 blocks|has 0 slices available for use" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10

5. LUN 状态与一致性

  • LUN 状态
    MluCli.exe poll -lu | egrep "^Identification_NiceName |^State_External_State |^State_Internal_State |^Status |^Replication Destination |^Host Access "
  • 数据一致性问题
    run_dbg_ext.pl -n mlu | egrep "NiceName|LostExtentCount"
    zgrep -E "FsRpt" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10
    zgrep -E "HasCorruptCrc|Read I/O error due to CRC error" /EMC/C4Core/log/c4_safe_ktrace.log* | head -10

6. 文件系统 (UFS64)

  • 文件系统状态
    MluCli.exe poll -sf | egrep "^Name |^State |^IsMountedReadOnlyToApplyPoolFullPolicy |^State_Status |^Recovery_Flag |^ExportedSize |^SizeUsed |^Thin |^Upper Deck File System Id |^IsReadOnly |^IsReplicationDestination "
  • 挂载检查
    /nas/bin/server_df ALL

7. VDM (NAS Server)

MluCli.exe poll -sfs | egrep "^Name |^State |^State_Status |^Extended Status |^IsReplicationDestination |^IsPacketReflectEnabled "

8. 主机连接问题

zgrep "modified the HLU for host" /EMC/backend/log_shared/EMCSystemLogFile* | head -10

zgrep "iSCSI Authentication Failure" /EMC/backend/log_shared/EMCSystemLogFile* | head -10

grep -E "Can't expand filesystem which doesn't exist|matchedFsId: N/A" /EMC/CEM/log/cemtracer_host.log | head -5

相关推荐
拥友LikT18 分钟前
惠普DL380服务器安装系统以后无法读取到系统盘启动解决方案(其他品牌服务器类似解决思路)
linux·服务器系统安装
怒放的生命199120 分钟前
前端vue项目在vscode使用插件部署到服服务器的方法
服务器·ide·vscode
程序猿编码20 分钟前
Linux 文件变动监控工具:原理、设计与实用指南(C/C++代码实现)
linux·c语言·c++·深度学习·inotify
温柔532921 分钟前
仓颉语言异常捕获机制深度解析
java·服务器·前端
网硕互联的小客服22 分钟前
SSD和HDD存储应该如何选择?
linux·运维·服务器·网络·安全
lemon31062422 分钟前
浪潮服务器装linux系统步骤
linux·运维·服务器
gugugu.23 分钟前
Linux进程:进程状态
linux·运维·服务器
wanhengidc25 分钟前
服务器在企业中的作用与价值
运维·服务器·arm开发·安全·智能手机·玩游戏
IDC02_FEIYA26 分钟前
视频网站服务器带宽需要多少?视频网站服务器配置要求
运维·服务器·音视频
Wang's Blog28 分钟前
Linux小课堂: Apache虚拟主机配置之基于IP与域名的服务器部署指南
linux·服务器·apache