DAY38 Dataset 类和DataLoader 类

  • Dataset 类

    • __getitem__:实现索引访问(dataset[idx]),用于获取单条数据样本(如图片 + 标签)。
    • __len__:返回数据集的总样本数量,支持 len(dataset)
    • 本质是 Python 的魔法方法,让自定义数据集能像 Python 容器一样被遍历和索引。
  • DataLoader 类

    • 对 Dataset 进行批量加载,支持打乱数据多进程读取自动批处理等功能。
    • 核心参数:batch_size(批次大小)、shuffle(是否打乱)、num_workers(加载进程数)。
    • 作用:高效地为模型训练提供迭代式批量数据。
  • MNIST 手写数据集

    • 经典手写数字图像数据集,包含 0-9 共 10 个类别。
    • 训练集 60000 张,测试集 10000 张,单张图片为 28×28 灰度图。
    • 常用于入门图像分类任务。

🎯 作业:CIFAR 数据集与单张图片获取

1. CIFAR 数据集简介
  • CIFAR-10:包含 10 个类别(飞机、汽车、鸟类、猫、鹿、狗、青蛙、马、船、卡车),训练集 50000 张,测试集 10000 张,单张图片为 32×32 彩色图。
  • CIFAR-100:包含 100 个细分类别,结构与 CIFAR-10 类似,类别更多、难度更大。
2. 代码示例:获取并展示 CIFAR-10 中的一张图片
python 复制代码
import torch
import torchvision.datasets as datasets
import torchvision.transforms as transforms
import matplotlib.pyplot as plt

# 1. 定义数据预处理
transform = transforms.Compose([
    transforms.ToTensor(),  # 转为 Tensor
])

# 2. 加载 CIFAR-10 训练集
train_dataset = datasets.CIFAR10(
    root="./data", train=True, download=True, transform=transform
)

# 3. 获取第 0 张图片与标签
img, label = train_dataset[0]

# 4. 类别名称映射
classes = ('plane', 'car', 'bird', 'cat', 'deer', 'dog', 'frog', 'horse', 'ship', 'truck')

# 5. 展示图片
plt.imshow(img.permute(1, 2, 0))  # 将 (C, H, W) 转为 (H, W, C) 以适配 matplotlib
plt.title(f"Label: {classes[label]}")
plt.axis("off")
plt.show()

💡 补充说明

  • permute(1, 2, 0):将 Tensor 的通道维度从 (C, H, W) 调整为 (H, W, C),符合 matplotlib 对图像的输入要求。
  • 若使用 CIFAR-100,只需将 datasets.CIFAR10 替换为 datasets.CIFAR100,并更新类别名称映射即可。
相关推荐
小和尚同志4 小时前
AI 自动化测试探索(二):Chrome-devtools MCP
人工智能·e2e·aigc
冬奇Lab7 小时前
Workflow 系列(02):设计范式——四层架构、三种 Context 传递模式与确认门设计
人工智能·agent·工作流引擎
冬奇Lab7 小时前
每日一个开源项目(第145篇):Trellis - 把项目记忆、规范和任务上下文持久化进代码仓库
人工智能·开源·资讯
有道AI情报局7 小时前
Harness即产品
人工智能·agent
罗西的思考8 小时前
机器人 / 强化学习】HIL-SERL:人类在环驱动的具身智能进化框架
人工智能·算法·机器学习
IT_陈寒9 小时前
SpringBoot自动配置的坑,我的API突然就404了
前端·人工智能·后端
笃行3509 小时前
从零到上线:用 EdgeOne Makers + CodeBuddy 搭一个「对账核对员」AI Agent
人工智能
用户68563262086910 小时前
Claude Code 乱猜字段名?我给它写了一个"数据库查询约束 Skill"
人工智能
你_好10 小时前
# 给你的产品嵌入一个「会操作界面的 AI 助手」
人工智能
ShallWeL10 小时前
【机器学习】(3)—— 线性回归:梯度下降
人工智能·机器学习