pytorch中的torch.hub.load():以vggish为例

  pytorch提供了torch.hub.load()函数加载模型,该方法可以从网上直接下载模型或是从本地加载模型。官方文档

cpp 复制代码
torch.hub.load(repo_or_dir, model, *args, source='github', trust_repo=None, force_reload=False, verbose=True, skip_validation=False, **kwargs)

参数说明:
repo_or_dir( string ) 如果是 'github', 这应该对应于格式为可选的ref(标记或分支),例如 'pytorch/vision:0.10'。 如果是"local",则它应该是本地目录的路径。sourcerepo_owner/repo_name:refrefmainmastersource
model ( string ) 在dir的hubconf.py
*args(可选)callable 的相应参数。
source ( string , optional ) 'github' 或 'local'。指定如何解释repo_or_dir。
force_reload ( bool , optional ) 是否无条件强制重新下载github repo。默认为False,即下一次直接从本地读取。
verbose ( bool , optional ) 如果False,静音有关命中本地缓存的消息。请注意,有关首次下载的消息无法静音。如果source = 'local'没有任何影响。默认为True。
skip_validation ( bool , optional ) 如果False,torchhub 将检查github参数指定的分支或提交是否正确属于 repo 所有者。这将向 GitHub API 发出请求;您可以通过设置GITHUB_TOKEN环境变量来指定非默认 GitHub 令牌 。默认为False。
**kwargs(可选) 可调用的对应kwargs。

加载vggish预训练模型

  vggish模型用于音频分类模型的特征嵌入,预训练的pytorch版本:harritaylor/torchvggish,该版本的权重直接从tensorflow模型移植,因此使用"torchvggish"创建的嵌入将是相同的。

  官方的加载模型示例代码:

cpp 复制代码
import torch

model = torch.hub.load('harritaylor/torchvggish', 'vggish')
model.eval()

# Download an example audio file
import urllib
url, filename = ("http://soundbible.com/grab.php?id=1698&type=wav", "bus_chatter.wav")
try: urllib.URLopener().retrieve(url, filename)
except: urllib.request.urlretrieve(url, filename)

model.forward(filename)

  运行这个代码块会自动从github上加载预训练的torchvggish模型和与训练权重,如果在hub里提示缺少什么包直接装就可以。

  这里要提一个问题:如果在下载模型的中途中断下载,那么下次运行这个代码的时候可能会报错:

cpp 复制代码
RuntimeError: unexpected EOF, expected 198783261 more bytes. The file might be corrupted.

  这个问题是说从本地加载的文件是残缺的,不完整。因为该方法会首先从本地load文件,而你之前下载的文件没下完,设置force_reload为True也没啥用,需要找到你本地下载下来的预训练模型pth文件并且删掉,就可以重新下载了。

相关推荐
能年玲奈喝榴莲牛奶4 分钟前
使用AI编写-资产和漏洞管理系统
人工智能·python·网络安全·安全服务
__Wedream__8 分钟前
ICPR 2022 多教师知识蒸馏技术应用于图像超分辨率重建——MTKDSR
图像处理·人工智能·深度学习·超分辨率重建·图像复原和增强
元岳数字人小元11 分钟前
数字人开源技术优势解析,助力智能交互普及落地
运维·人工智能·开源·人机交互·交互
一夜白头催人泪19 分钟前
从0到1搭建AI驱动的UI自动化:无代码DOM设计文档
人工智能·ui·自动化
ACP广源盛1392462567335 分钟前
Ling‑3.0‑flash 昇腾 0‑Day 适配落地@ACP#IX9104 在国产高密度算力矩阵中的机遇与落地场景
大数据·人工智能·分布式·单片机·嵌入式硬件
JXJD200443 分钟前
AI 推理服务器高速连接器线束自动化设备定制指南 全场景互连非标整线方案参考
服务器·人工智能·自动化
zzz_23681 小时前
TencentDB-Agent-Memory 深度解析:让多个 Agent 共享项目经验的记忆中枢
java·开发语言·jvm·人工智能·agent·memory·tencent db
DeepVisionary1 小时前
再观察小星火:当大厂分成“冰封“,国产轻模式创作者平台如何跑出加速度
python·自动化
gb42152871 小时前
python中unstructured库和langchain-unstructured库在解析pdf文件的时候的区别?
python·langchain·pdf
湘美书院--湘美谈教育1 小时前
湘美书院谈探索式教育,中医药AI研究络病理论
大数据·人工智能·深度学习·学习·生活