Jenkins服务器报磁盘空间不足的问题解决方案

我们在开发项目的时候使用Jenkins进行自动化构建,能够提高我们的打包部署效率,但使用时间久了,服务器磁盘空间就会堆满,报"jenkins Disk space is below threshold of 1.00 GiB. Only 361.88 MiB out of 99.97 GiB left on /home/jenkins."错误。我们如何解决这个问题了?本文将详细阐述。

一、立即释放磁盘空间

适用于紧急处理

复制代码
# (1) 清理 Docker 无用资源 (适用于容器化部署)

docker system prune -a --volumes --force



# (2) 清理 Jenkins 工作空间历史记录

# 进入 Jenkins 容器或主机

cd /home/jenkins/jenkins_home/jobs/

find . -type d -name "builds" -exec rm -rf {}/* \;  # 保留目录结构仅删除内容



# (3) 删除超大日志文件

find /home/jenkins_jdk17 -type f -name "*.log*" -size +100M -exec rm -f {} \;

二、诊断磁盘占用根源

复制代码
# (1) 可视化分析磁盘占用 (安装 ncdu 工具)

sudo apt install ncdu -y && ncdu /home/jenkins_jdk17



# (2) 检查 Docker 存储占用

docker system df -v



# (3) 定位 Jenkins 大文件分布

du -h --max-depth=1 /home/jenkins_jdk17/jenkins_home | sort -hr

三、针对性清理策略

1.Jenkins 专用清理

复制代码
# (1) 按时间清理构建历史 (保留最近10次)

cd /home/jenkins_jdk17/jenkins_home/jobs/

find . -path "*/builds/*" -type d -mtime +7 -exec rm -rf {} \;  # 删除7天前的构建



# (2) 清理 workspace 残留

find /home/jenkins_jdk17/jenkins_home/workspace/ -name "@tmp" -type d -mtime +1 -exec rm -rf {} \;

2.Docker专项优化

复制代码
# (1) 限制容器日志大小 (全局配置)
sudo tee /etc/docker/daemon.json <<EOF
{
  "log-driver": "json-file",
  "log-opts": {
    "max-size": "10m",
    "max-file": "3"
  }
}
EOF
systemctl restart docker

# (2) 清理 dangling 镜像
docker images -q -f dangling=true | xargs docker rmi

四、长期预防方案

Jenkins 配置优化

安装插件

ThinBackup:增量备份与清理

Disk Usage:实时监控

全局配置

进入 Manage Jenkins → System Configuration

设置构建保留策略:

Max # of builds to keep = 10

Days to keep builds = 7

​​​​​​​自动化运维脚

创建定时清理任务 (/etc/cron.daily/jenkins_cleanup):

复制代码
#!/bin/bash

# 清理 30 天前的构建记录

find /home/jenkins_jdk17/jenkins_home/jobs/ -path "*/builds/*" -type d -mtime +30 -delete



# 清理临时工作空间

find /home/jenkins_jdk17/jenkins_home/workspace/ -name "@tmp" -type d -mtime +1 -exec rm -rf {} \;



# 清理 Docker 日志

find /var/lib/docker/containers/ -name "*.log" -size +50M -exec truncate -s 0 {} \;

​​​​​​​存储扩容方案

复制代码
# (1) 使用 LVM 动态扩展分区

sudo lvextend -L +50G /dev/mapper/ubuntu--vg-home

sudo resize2fs /dev/mapper/ubuntu--vg-home



# (2) 或迁移 Jenkins 数据目录

sudo systemctl stop jenkins

rsync -avz /home/jenkins_jdk17 /new/storage/

sudo ln -sf /new/storage/jenkins_jdk17 /home/jenkins_jdk17

sudo systemctl start jenkins

五、监控与告警增强

复制代码
# Prometheus 告警规则示例 (prometheus.rules.yml)

- alert: JenkinsLowDiskSpace

  expr: (node_filesystem_avail_bytes{mountpoint="/home/jenkins_jdk17"} / node_filesystem_size_bytes{mountpoint="/home/jenkins_jdk17"}) * 100 < 10

  for: 15m

  labels:

    severity: critical

  annotations:

    summary: "Jenkins 存储空间不足 (实例 {{ $labels.instance }})"

    description: "挂载点 /home/jenkins_jdk17 剩余空间仅剩 {{ printf \"%.2f\" (100 - (node_filesystem_avail_bytes{mountpoint=\"/home/jenkins_jdk17\"} / node_filesystem_size_bytes{mountpoint=\"/home/jenkins_jdk17\"}) * 100) }}%"

六、关键总结

  1. 优先清理 workspace/@tmp 和 builds/ 目录,这些是主要空间占用源
  2. 对于容器化部署,日志轮转配置比物理机环境更重要
  3. 当存储使用率持续 >80% 时,应考虑横向扩展存储而非单纯清理
相关推荐
張萠飛5 分钟前
Linux的TCP连接数到达2万,其中tcp_tw、tcp_alloc、tcp_inuse都很高,可能出现什么问题
linux·网络·tcp/ip
孙同学_30 分钟前
【Linux篇】自主Shell命令行解释器
android·linux
敲上瘾1 小时前
高并发内存池(二):Central Cache的实现
linux·服务器·c++·缓存·哈希算法
一只努力学习的Cat.1 小时前
Linux:环境变量
linux
安顾里1 小时前
Linux命令-tar
linux·运维·服务器
沐土Arvin1 小时前
Nginx 核心配置详解与性能优化最佳实践
运维·开发语言·前端·nginx·性能优化
有莘不破呀2 小时前
服务器磁盘卷组缓存cache设置介绍
linux·运维·服务器
DBWYX2 小时前
gcc 链接顺序,静态库循环依赖问题
linux·运维·服务器
叶辰 .2 小时前
ES使用聚合aggregations实战(2025.04.02更新)
大数据·elasticsearch·jenkins
zxsz_com_cn2 小时前
风电行业预测性维护解决方案:AIoT驱动下的风机健康管理革命
大数据·运维·人工智能