Pytorch新版本如何使用现有网络模型,怎么修改现有模型

来自 千问

在 PyTorch 的新版本(特别是 torchvision 0.13+)中,使用和修改现有网络模型的标准方法发生了一些重要变化。主要的变化在于加载预训练权重 的方式,以及如何灵活地修改模型结构以适应你的任务(如迁移学习)。

以下是基于最新版本的详细指南:

1. 如何使用现有网络模型

在新版本中,pretrained 参数已被弃用,推荐使用 weights 参数来明确指定要加载的权重类型。

语法:

python 复制代码
import torchvision.models as models

# 1. 加载预训练模型 (推荐写法)
model = models.vgg16(weights=models.VGG16_Weights.DEFAULT)

# 2. 或者,如果你不想加载预训练权重 (从头开始训练)
model = models.vgg16(weights=None)

# 3. (旧写法,已弃用) 
# model = models.vgg16(pretrained=True) # 不推荐,未来版本会报错
  • weights=models.VGG16_Weights.DEFAULT: 加载在 ImageNet 上预训练的权重。这是目前最标准的做法。
  • weights=None: 不加载预训练权重,模型参数会被随机初始化。

2. 如何修改现有模型

加载模型后,通常需要根据你的数据集(如 CIFAR-10 只有 10 个类别,而 ImageNet 有 1000 个)来修改模型结构。主要有两种常用方法:

方法一:替换层(最常用)

直接替换模型的最后一层(通常是全连接层),以改变输出维度。

示例:修改 VGG16 的输出为 10 类

python 复制代码
import torchvision.models as models
import torch.nn as nn

# 加载模型
model = models.vgg16(weights=None)

# 查看原模型结构,你会发现最后一层是 classifier[6]
# Linear(in_features=4096, out_features=1000, bias=True)

# 修改:将最后一层替换为输出 10 维的层
model.classifier[6] = nn.Linear(4096, 10)

print(model.classifier[6]) # 检查是否修改成功

示例:修改 ResNet 的输出为 10 类

python 复制代码
model = models.resnet18(weights=None)

# ResNet 的最后一层通常命名为 'fc'
# 获取原全连接层的输入特征数
num_ftrs = model.fc.in_features 

# 替换为新的全连接层
model.fc = nn.Linear(num_ftrs, 10)
方法二:添加新层

如果你不想直接替换原有层,而是想在网络末尾追加新的层(例如添加一个特定的分类头)。

python 复制代码
# 加载模型
model = models.vgg16(weights=None)

# 在 classifier 序列的末尾添加一个新层
# 参数:(名称, 层结构)
model.classifier.add_module('new_layer', nn.Linear(1000, 10))

# 或者更灵活的方式是直接重新定义 classifier
# 例如:在原有基础上加一层 Dropout 和新的 Linear
model.classifier = nn.Sequential(
    *list(model.classifier.children())[:-1], # 保留除了最后一层外的所有层
    nn.Dropout(0.5), # 可选:添加正则化
    nn.Linear(4096, 10) # 新的输出层
)

3. 完整的训练与保存流程示例

结合上述内容,这是一个从加载、修改到保存的标准流程:

python 复制代码
import torch
import torch.nn as nn
import torchvision.models as models

# 1. 加载预训练模型
model = models.resnet18(weights=models.ResNet18_Weights.DEFAULT)

# 2. 修改模型以适应新任务 (例如 10 分类)
num_classes = 10
model.fc = nn.Linear(model.fc.in_features, num_classes)

# 3. 定义损失函数和优化器
criterion = nn.CrossEntropyLoss()
optimizer = torch.optim.Adam(model.parameters(), lr=0.001)

# --- 训练循环 (伪代码) ---
# for inputs, labels in dataloader:
#     optimizer.zero_grad()
#     outputs = model(inputs)
#     loss = criterion(outputs, labels)
#     loss.backward()
#     optimizer.step()

# 4. 保存模型 (推荐方式:仅保存参数)
# 训练完成后,保存模型参数
torch.save(model.state_dict(), 'my_model_weights.pth')

# 5. 加载模型 (推理时)
# 必须先重建完全相同的结构
loaded_model = models.resnet18(weights=None) # 注意:推理时通常不需要预训练权重,因为我们有自己的
loaded_model.fc = nn.Linear(loaded_model.fc.in_features, num_classes)
loaded_model.load_state_dict(torch.load('my_model_weights.pth'))
loaded_model.eval() # 切换到评估模式

关键变化总结

功能 旧写法 (已弃用) 新写法 (推荐)
加载预训练 models.vgg16(pretrained=True) models.vgg16(weights=models.VGG16_Weights.DEFAULT)
不加载权重 models.vgg16(pretrained=False) models.vgg16(weights=None)
访问权重 隐式 显式通过 Weights 枚举类访问

建议: 在新项目中,请务必使用 weights 参数,以确保代码的兼容性和可维护性。

相关推荐
Pyeako9 小时前
PyQt5 + PaddleOCR实战:打造桌面级实时文字识别工具
开发语言·人工智能·python·qt·paddleocr·pyqt5
unclejet9 小时前
数字化转型深水区:AI结对编程破解研发痛点
人工智能·结对编程
wAEWQ6Ib79 小时前
使用 C# 实现 RTF 文档转 PDF 格式
人工智能
zxsz_com_cn9 小时前
设备预测性维护模型构建方法
人工智能
chenglin0169 小时前
AI 服务企业级数据隐私与安全
网络·人工智能·安全
大数据AI人工智能培训专家培训讲师叶梓10 小时前
Merlin:面向腹部 CT 的三维视觉语言基础模型
人工智能·计算机视觉·大模型·医疗·ct·视觉大模型·医疗人工智能
AI_Auto10 小时前
【智能制造】-五大AI场景重塑智能制造
人工智能·制造
ggabb10 小时前
光芯片技术突破与AI算力应用解析
人工智能
大强同学10 小时前
Obsidian CLI + Claude Code = 王炸组合
人工智能·windows·ai编程·cli
工业机器视觉设计和实现10 小时前
微分方程的联想
人工智能·神经网络·感想