【笔记】解决部署国产AI Agent 开源项目 MiniMax-M1时 Hugging Face 模型下载缓存占满 C 盘问题:更改缓存位置全流程

一、发生背景

MiniMax-AI/MiniMax-M1:MiniMax-M1,世界上第一个开放权重、大规模的混合注意力推理模型。

在本地部署 MiniMax-M1 开源项目时,执行 huggingface-cli download MiniMaxAI/MiniMax-M1-80k 下载模型的命令后,C 盘空间持续被占用,甚至出现 "磁盘空间不足" 提示。查看发现 C:\Users\用户名\.cache\huggingface 文件夹占用超 400GB,严重挤压系统盘空间,急需将缓存迁移到空闲的磁盘分区( 例如我的 G 盘)。

二、原因分析

Hugging Face 工具(如 huggingface-cli、Transformers 库 )默认会将模型、缓存文件存储在系统盘(C 盘)的用户缓存目录(C:\Users\用户名\.cache\huggingface )。当下载大模型(如 MiniMax-M1 相关模型)时,大量模型权重文件、中间缓存会不断写入该目录,若未及时干预,极易占满 C 盘,导致系统运行卡顿甚至报错。

三、排查与解决过程

(一)确认缓存路径与占用

  1. 定位缓存文件夹 :通过文件资源管理器找到 C:\Users\love\.cache\huggingface,查看属性确认其占用空间(超 400GB ),明确空间爆满的 "罪魁祸首"。
  2. 关联系统存储统计 :在 Windows 设置 "系统> 存储 > 其他" 中,看到 C:\Users\love\.cache 占用大量空间,进一步验证缓存位置与问题关联。

(二)规划新缓存路径

在空闲的磁盘(比如 G 盘)创建专门的缓存文件夹 G:\huggingface_cache,用于存放 Hugging Face 相关缓存,为后续迁移做准备。

(三)设置环境变量(关键步骤)

Hugging Face 通过环境变量控制缓存路径,需设置以下核心变量(以 Windows 系统为例 ):

  1. 打开系统环境变量设置:右键 "此电脑"→"属性"→"高级系统设置"→"环境变量"。
  2. 新建系统变量 :
    • HUGGINGFACE_HUB_CACHE :变量名填 HUGGINGFACE_HUB_CACHE,变量值填 G:\huggingface_cache ,控制 huggingface-cli 等工具的通用缓存路径。

      变量名:

      复制代码
      HUGGINGFACE_HUB_CACHE

      变量值:

      复制代码
      G:\huggingface_cache
    • HF_HOME :变量名填 HF_HOME,变量值填 G:\huggingface_cache ,作为 Hugging Face 缓存的 "根目录",增强路径控制优先级。

      变量名:

      复制代码
      HF_HOME

      变量值:

      复制代码
      G:\huggingface_cache
  3. 保存生效:点击 "确定" 保存变量,关闭环境变量设置窗口。

(四)验证环境变量与缓存迁移

  1. 重启终端 / 环境 :关闭当前 Conda 环境(MiniMax-M1 )终端,重新打开并激活环境,执行 echo %HUGGINGFACE_HUB_CACHE% 和 echo %HF_HOME% ,输出 G:\huggingface_cache 则变量设置生效。

  2. 测试缓存迁移 :重新执行 huggingface-cli download 相关命令(如下载小模型测试 ),查看 G:\huggingface_cache 目录是否生成新缓存文件。确认新缓存正常写入 G 盘后,删除 C 盘原 .cache\huggingface 目录,释放系统盘空间。

    huggingface-cli download MiniMaxAI/MiniMax-M1-80k

可以看到缓存位置更改成功了。

四、总结与注意事项

(一)流程回顾

  1. 发现问题:C 盘因 Hugging Face 缓存爆满,定位到 C:\Users\用户名\.cache\huggingface 路径。
  2. 解决思路:通过设置系统环境变量,将缓存路径重定向到空闲磁盘(G 盘 )。
  3. 验证收尾:重启终端确认变量生效,测试下载验证新缓存路径,清理旧缓存释放空间。

(二)注意事项

  1. 环境变量生效时机:修改系统环境变量后,需重启终端 / 应用(如 Conda 环境 ),确保变量重新加载。
  2. 文件夹权限 :新缓存路径(G:\huggingface_cache )需保证当前用户有 "写入" 权限,避免因权限不足导致缓存写入失败。
  3. 工具特殊配置:若使用 vLLM、SGLang 等推理框架,需额外检查框架自身缓存路径设置,确保全流程缓存迁移到位。
  4. 原有下载失效问题: 更改缓存位置,会导致原有已下载的模型不可用 ,所以建议完整迁移或者按实际情况重新下载。
  5. **部署顺序:**建议有预见性地先更改 Hugging Face 的缓存位置,避免部署受阻。

原先已下载过的模型在更改缓存位置后已不可见

通过以上步骤,成功解决 Hugging Face 缓存占满 C 盘问题,既释放系统盘空间,又规范了缓存存储位置,为后续大模型本地部署与运行扫清存储障碍 。

下一篇预告:

关于模型下载失败的恢复下载或修复方法

相关推荐
Wang's Blog2 小时前
Java 项目实战: 交友项目:登录链路回顾与今日任务地图
java·开发语言·状态模式·交友
Chenyu_3102 小时前
DPDK、TC 和 XDP:Linux 高性能网络到底在优化什么
linux·服务器·网络·缓存
dozenyaoyida2 小时前
AI与大模型新闻日报 | 2026-10-17
人工智能·ai·chatgpt·新闻
遇码3 小时前
流式调用中途断连别直接报错:瞬态故障识别、退避重试与中文根因诊断的搭建方法
大数据·人工智能·ai·rust·数据分析·大模型·agent
信誓旦旦的程序猿3 小时前
【Python量化实战宝典 #08】可转债与债券接口手册:转股价·溢价率·纯债价值(Python 可跑)
java·python·股票数据api·股票数据api接口·股票api数据接口·股票量化数据api·股票量化数据接口
救救孩子把3 小时前
AI面试八股文-21_21-多模态Agent面试题-Vision-Language-Agent
人工智能·面试·职场和发展·llava·多模态agent
砚底藏山河3 小时前
python量化:行情数据回溯
java·开发语言·python·金融·maven
今年下半年3 小时前
AI智能体项目实战记录(02):初始化 Python 项目
开发语言·人工智能·python·fastapi
Jlzn88883 小时前
华东电芯分选通道数怎么配才不堵线
java·人工智能·架构·自动化·制造