Google Colab 环境现已无需手动登录 HF 账号

前段时间我们介绍了一些 HF 核心库在 Google Colab 环境中的内置,包括可以使用 hf:// 资源标识符来调用 Hub 上的数据集等等,详情可以回顾文章:Google Colab 现已支持直接使用 🤗 transformers 库。

今天,随着 huggingface_hub 库的更新,在 Google Colab 环境里,你可以使用其 Secrets (密钥) 功能,将 HF_TOKEN 加入其中成为环境变量直接调用!请查看详细的视频演示:

除此之外,自最近更新的 huggingface_hub 库版本 (v.19.0) 开始,我们将对一些环境变量的名称进行更改,以标准化生态系统中所有环境变量的使用 (均以 HF_ 开头):

变更前的环境变量 变更后的环境变量
HUGGINGFACE_HUB_CACHE HF_HUB_CACHE
HUGGINGFACE_ASSETS_CACHE HF_ASSETS_CACHE
HUGGING_FACE_HUB_TOKEN HF_TOKEN
HUGGINGFACE_HUB_VERBOSITY HF_HUB_VERBOSITY

下面是这些环境变量的功能介绍:

  • HF_HUB_CACHE:用于配置本地缓存 Hugging Face Hub 的仓库(模型、数据集和空间)。默认路径为 $HF_HOME/hub(例如 ~/.cache/huggingface/hub)。
  • HF_ASSETS_CACHE:用于配置本地缓存由下游库创建的资产。这些资产可能包括预处理数据、从 GitHub 下载的文件、日志等。默认路径为 $HF_HOME/assets(例如 ~/.cache/huggingface/assets)。
  • HF_TOKEN:用于配置用户访问令牌以认证到 Hugging Face Hub。如果设置了此变量,它将覆盖存储在机器上的令牌(位于 $HF_HOME/token)。
  • HF_HUB_VERBOSITY:设置 huggingface_hub 日志记录器的详细级别。必须是以下之一:{"debug", "info", "warning", "error", "critical"}。默认为 warning
相关推荐
科技圈观察19 分钟前
壹沓科技WAIC全球首发小沓OS与小沓KE,重塑供应链AI基础设施
人工智能·科技
爱听歌的周童鞋28 分钟前
霹雳吧啦Wz | AIGC | 图像生成篇 | DDPM介绍与公式推导 | 笔记 | (二) 优化目标引入 ELBO/VLB
aigc·diffusion model·ddpm·reverse process·image generate·forward process
CV-Climber34 分钟前
检索技术的实际应用
人工智能·算法
颜酱1 小时前
01 | 骨架搭建:FastAPI + Vue 跑通第一个 SSE 流式问答
前端·人工智能·后端
龙腾AI白云1 小时前
世界模型被视为破局关键
人工智能·virtualenv·知识图谱·pygame
新知图书1 小时前
10.1 项目背景与需求分析(智能客服智能体开发)
人工智能·agent·ai agent·智能体·扣子
ifenxi爱分析1 小时前
爱分析最新报告解读:AI数据基础设施与数据中台的区别
大数据·人工智能
hhzz1 小时前
Tiger AI Platform平台中增加人脸识别功能
图像处理·人工智能·算法·计算机视觉·大模型
阿里云大数据AI技术1 小时前
Search Lake:ES x Paimon 让湖上多模态数据可搜可用
人工智能·elasticsearch·搜索引擎
赵康1 小时前
AI 写代码之后,Code Review 会议怎么开
ai·llm·skill