CentOS 7.9 根分区 / 已经 100% 用满隐藏占用解决办法

ls -l /proc/*/fd/* 2>/dev/null | grep deleted

---命令用于查找系统中已被删除但仍被进程占用的文件(也称为"幽灵文件"或"未释放文件句柄")。
真正吃掉 1.2T 磁盘的,是 3 个进程的"已删除日志文件"

最少有一个 nohup.out 是"巨无霸文件"

PID 文件 判断
3363 /home/service/qms/nohup.out (deleted) ⭐⭐⭐⭐⭐ 最大嫌疑(业务日志)
814 /var/log/audit/audit.log (deleted) ⭐⭐⭐(审计日志,可能很大)
1224 /var/log/tuned/tuned.log (deleted) ⭐(一般不大)

查看指定进程详细信息

ps -fp 3363 ps -fp 814

向进程发送终止信号

kill -TERM 3363

kill -TERM 814

重启系统调优服务

systemctl restart tuned
防止 100% 再次发生(强烈建议你做)

nohup xxx >> app.log 2>&1 &

配合 logrotate。

vi /etc/audit/auditd.conf ----audit 日志限制大小

max_log_file = 50

num_logs = 5

systemctl restart auditd ----重启 audit

logrotate -f /etc/logrotate.d/tuned ---tuned 日志轮转

🧠 本次事故的根因总结(非常重要)

业务进程 + nohup.out + 没有日志轮转 = 磁盘必炸

具体是:

  • /home/service/qms/nohup.out

  • 文件被 rm

  • 但进程还在写

  • 导致 1TB 日志"隐身占盘"

相关推荐
Chenyu_3107 小时前
DPDK、TC 和 XDP:Linux 高性能网络到底在优化什么
linux·服务器·网络·缓存
qqxiaoxingxing7 小时前
HR重复性工作自动化落地指南:先梳理任务边界,再选工具
运维·自动化
王琦03188 小时前
持续集成持续交付企业示例
运维·ci/cd
Lsetea8 小时前
SSL证书指纹相同但文件哈希不同:PEM、DER与公钥摘要怎么比
运维·https·ssl证书·openssl·证书链
wtblszn8 小时前
废气处理余热回收设备远程运维系统方案
运维
陈让然8 小时前
WSL 桥接设置静态IP(快速)
linux·网络·ubuntu
乔旭伟8 小时前
Linux 服务器备份实战:一致性快照、日志归档与恢复演练
linux·运维·服务器
乔旭伟9 小时前
Linux 服务器安全加固实战:SSH、防火墙、补丁与入侵排查
linux·服务器·安全
cpolar技术支持9 小时前
把配置发出去怕带出密钥?先把含凭据配置转成脱敏只读快照,用 cpolar 给同事核对差异
运维·python·内网穿透·cpolar·配置脱敏
我不会起名字3229 小时前
Redis 突然只能读不能写:MISCONF 报错的 3 类触发条件与 4 步恢复
运维·redis·持久化·排查·misconf