浏览器下载huggingface网络连接超时,使用镜像源教程

镜像源网址:

https://hf-mirror.com/

可以:

1.安装依赖:

pip install -U huggingface_hub

2.设置环境变量

(linux)

export HF_ENDPOINT=https://hf-mirror.com

(windows)

$env:HF_ENDPOINT = "https://hf-mirror.com"

3.下载模型指令(替换掉模型gpt和地址)

huggingface-cli download --resume-download gpt2 --local-dir gpt2

下载数据集指令

huggingface-cli download --repo-type dataset --resume-download wikitext --local-dir wikitext

详细操作见网址

下载模型到本地之后,可以通过代码使用本地模型:

复制代码
from transformers import AutoTokenizer, AutoModel

# 使用绝对路径或相对路径
local_model_path = "your_path"

# 或者如果代码文件在同一目录下,可以用相对路径
# local_model_path = "./roberta-base-finetuned-dianping-chinese"

# 加载模型和分词器
tokenizer = AutoTokenizer.from_pretrained(local_model_path)
model = AutoModel.from_pretrained(local_model_path)

print("✅ 模型加载成功!")
print(f"模型类型: {type(model)}")
print(f"分词器: {tokenizer}")

实操:

以下为jupyter nootbook三个cell

复制代码
# Cell 1: 设置镜像
import os
os.environ['HF_ENDPOINT'] = 'https://hf-mirror.com'
print("镜像已设置为: https://hf-mirror.com")

# Cell 2: 下载模型(带进度显示)
!huggingface-cli download hfl/rbt3 --local-dir ./hfl_rbt3

# Cell 3: 验证下载完成
import glob
files = glob.glob("./hfl_rbt3/*")
print(f"下载了 {len(files)} 个文件:")
for f in files:
    print(f"  - {f}")
相关推荐
千寻girling6 分钟前
滑动窗口刷了快一个月(26天)了 , 还没有刷完. | 含(操作系统学什么的Java 后端)
java·开发语言·javascript·c++·人工智能·后端·python
WL_Aurora8 分钟前
备战蓝桥杯国赛【day3】
python·蓝桥杯
码农阿豪11 分钟前
Python 操作金仓数据库的完全指南(下篇):SQL执行、批量操作与扩展功能
数据库·python·sql
曲幽13 分钟前
用了loguru我才明白,Python日志还能这么写
python·logging·fastapi·web·async·loguru·handler·uvicorn
小糖学代码15 分钟前
LLM系列:2.pytorch入门:9.神经网络的学习
人工智能·python·深度学习·神经网络·学习·机器学习
曾凡玉@17 分钟前
Python 并发编程系统笔记
开发语言·笔记·python
测试199829 分钟前
接口测试工具:Postman的高级用法
自动化测试·软件测试·python·测试工具·测试用例·接口测试·postman
2501_9012005333 分钟前
mysql数据库主键类型对性能的影响_使用自增整数优于UUID
jvm·数据库·python
.柒宇.36 分钟前
FastAPI进阶教程
开发语言·python·fastapi