audl服务器上 huggingface缓慢

在官网上看见学术资源加速:https://www.autodl.com/docs/network_turbo/

复制代码
source /etc/network_turbo

运行了这个脚本之后,直接顺利了。


前情提要:试了很多种方式,无法下载,包括snapshot_download、hf_hub_download、wget 等

bash 复制代码
import os
from huggingface_hub import snapshot_download

os.environ["HF_ENDPOINT"] = "https://hf-mirror.com"

print("开始下载 RoBERTa base 模型(仅 PyTorch + tokenizer 文件)...")

snapshot_download(
    repo_id="FacebookAI/roberta-base",
    local_dir="/root/autodl-tmp/roberta-base",
    allow_patterns=[
        "pytorch_model.bin",
        "config.json",
        "vocab.json",
        "merges.txt",
        "tokenizer_config.json"
    ],
    ignore_patterns=["*.msgpack", "*.h5", "*.ot", "*.safetensors"]  # 跳过不需要的
)

print("✅ 下载完成!")
相关推荐
waves浪游5 小时前
进程控制(中)
linux·运维·服务器·开发语言·c++
满天星83035775 小时前
【Linux】信号(上)
linux·运维·服务器·开发语言·c++
科普瑞传感仪器5 小时前
航空航天领域青睐:复杂曲面机器人抛光为何必须采用六维力控?
运维·人工智能·机器人·自动化·无人机
CIb0la5 小时前
在 ARM CPU 上运行 x86 应用的开源项目:FEX
linux·运维·生活
谷粒.5 小时前
DevOps流水线中的质量门禁设计:从理论到实践的全景解析
运维·开发语言·网络·人工智能·python·devops
wadesir5 小时前
Debian容器存储管理(Docker中实现数据持久化的完整指南)
运维·docker·debian
GOTXX5 小时前
性能与可靠双突破:openEuler 服务器场景评测报告
运维·服务器·网络·人工智能·后端·python
全栈工程师修炼指南5 小时前
Nginx | 负载均衡策略:一致性哈希算法实践
运维·算法·nginx·负载均衡·哈希算法
jianchwa5 小时前
Linux Kernel PCIe SRIOV机制分析
linux·运维·服务器
9ilk5 小时前
【Linux】--- 五种IO模型
linux·运维·网络