DAY38 Dataset 类和DataLoader 类

  • Dataset 类

    • __getitem__:实现索引访问(dataset[idx]),用于获取单条数据样本(如图片 + 标签)。
    • __len__:返回数据集的总样本数量,支持 len(dataset)。
    • 本质是 Python 的魔法方法,让自定义数据集能像 Python 容器一样被遍历和索引。
  • DataLoader 类

    • 对 Dataset 进行批量加载,支持打乱数据 、多进程读取 、自动批处理等功能。
    • 核心参数:batch_size(批次大小)、shuffle(是否打乱)、num_workers(加载进程数)。
    • 作用:高效地为模型训练提供迭代式批量数据。
  • MNIST 手写数据集

    • 经典手写数字图像数据集,包含 0-9 共 10 个类别。
    • 训练集 60000 张,测试集 10000 张,单张图片为 28×28 灰度图。
    • 常用于入门图像分类任务。

🎯 作业:CIFAR 数据集与单张图片获取

1. CIFAR 数据集简介
  • CIFAR-10:包含 10 个类别(飞机、汽车、鸟类、猫、鹿、狗、青蛙、马、船、卡车),训练集 50000 张,测试集 10000 张,单张图片为 32×32 彩色图。
  • CIFAR-100:包含 100 个细分类别,结构与 CIFAR-10 类似,类别更多、难度更大。
2. 代码示例:获取并展示 CIFAR-10 中的一张图片
python 复制代码
import torch
import torchvision.datasets as datasets
import torchvision.transforms as transforms
import matplotlib.pyplot as plt

# 1. 定义数据预处理
transform = transforms.Compose([
    transforms.ToTensor(),  # 转为 Tensor
])

# 2. 加载 CIFAR-10 训练集
train_dataset = datasets.CIFAR10(
    root="./data", train=True, download=True, transform=transform
)

# 3. 获取第 0 张图片与标签
img, label = train_dataset[0]

# 4. 类别名称映射
classes = ('plane', 'car', 'bird', 'cat', 'deer', 'dog', 'frog', 'horse', 'ship', 'truck')

# 5. 展示图片
plt.imshow(img.permute(1, 2, 0))  # 将 (C, H, W) 转为 (H, W, C) 以适配 matplotlib
plt.title(f"Label: {classes[label]}")
plt.axis("off")
plt.show()

💡 补充说明

  • permute(1, 2, 0):将 Tensor 的通道维度从 (C, H, W) 调整为 (H, W, C),符合 matplotlib 对图像的输入要求。
  • 若使用 CIFAR-100,只需将 datasets.CIFAR10 替换为 datasets.CIFAR100,并更新类别名称映射即可。
相关推荐
张彦峰ZYF3 小时前
越过边界之前:Reward Seeker 实验如何改写智能体安全的时间逻辑
人工智能·ai agent·anthropic·智能体安全·reward seeker·“控制评价过程”泛化跨领域策略·envbom
拓恒技术4 小时前
无人机巡检AI算法的工程化落地:从需求到交付的5个核心环节
人工智能·算法·无人机
罗西的思考6 小时前
AI 时代的 “房谋杜断”:如何培养能力、品味与判断力
人工智能·算法·机器学习
字节跳动视频云技术团队7 小时前
720P 直升 8K,解密 2026 抖音美好奇妙夜巨幕超分黑科技
人工智能·音视频开发
打工仔折腾 AI7 小时前
在 Ubuntu ARM64 部署 Q1 V3.0 MuJoCo 模型:加载、单步推理与执行器响应解析
linux·运维·人工智能·python·深度学习·ubuntu·性能优化
逐米时代7 小时前
从试点验证到协同深化:制造业AI转型三年路线图设计方法
人工智能
GlobalInfo7 小时前
全球及中国风电叶片检测机器人行业研究报告(2026版):市场现状、行业前景与占有率分析
运维·网络·人工智能·机器人
stormzhangV8 小时前
AI 越强,失业越严重
人工智能·aigc
夏文强9 小时前
Rerank 与混合检索:怎么让 RAG 从「能用」变成「好用」
人工智能·大模型·向量数据库·rag·检索增强生成
救救孩子把9 小时前
AI面试八股文-23_23-Agent可观测性与生产监控面试题
人工智能·面试·职场和发展·agent·langsmith·langfuase