「小土堆」pytorch DataSet

「小土堆」pytorch DataSet

python 复制代码
from cProfile import label

from torch.utils.data import Dataset
from PIL import Image
import os

class MyData(Dataset):
    def __init__(self, root_dir, label_dir):

        # root_dir = "hymenoptera_data/train"
        # label_dir = "ants_img"
        # 这两个值是由后面的实例传递过来的
        self.root_dir = root_dir
        self.label_dir = label_dir

        # 将其整合
        self.path = os.path.join(root_dir, label_dir)

        # os.listdir() 方法用于返回指定的文件夹包含的文件或文件夹的名字的列表。
        self.img_name_path = os.listdir(self.path)

    def __getitem__(self, index):

        img_name = self.img_name_path[index]
        img_item_path = os.path.join(self.path, img_name)
        img = Image.open(img_item_path)

        label = self.label_dir
        # 返回的是图片和名字
        return img, label

    def __len__(self):
        return len(self.img_path)


ants_dataset = MyData('hymenoptera_data/train', 'ants_img')
# for item in ants_dataset.img_path:
#     print(item)
# print(ants_dataset.__len__())
# print(ants_dataset.__getitem__(0))


bees_dataset = MyData('hymenoptera_data/train', 'bees_img')
# print(bees_dataset.__len__())
# print(bees_dataset.__getitem__(0))
#
# print(len(ants_dataset+bees_dataset))

# ant_dataset中包含两个值,一个img一个label
img, label = ants_dataset[0]
img.show()

​ 视频中一开始是先写class的以至于一开始没有弄懂 'root_dir' 和 'label_dir' 是干什么的,在创建实例之后进行传参就可以很好的理解了,前者是指文件夹的路径,后者是文件夹下的分类,由于文件夹下面分别有两个类别的例子,所以分为root和label两类。

dataset提供了访问和处理大量自然语言处理(NLP)数据集的工具,简单来说就是对数据集中的图片进行操作的一个简单的库。

python 复制代码
 def __init__(self, root_dir, label_dir):

        # root_dir = "hymenoptera_data/train"
        # label_dir = "ants_img"
        # 这两个值是由后面的实例传递过来的
        self.root_dir = root_dir
        self.label_dir = label_dir

        # 将其整合
        self.path = os.path.join(root_dir, label_dir)

        # os.listdir() 方法用于返回指定的文件夹包含的文件或文件夹的名字的列表。
        self.img_name_path = os.listdir(self.path)

​ 上述代码中从上到下来看,首先是MyData库,其继承了Dataset这个类,第一个函数就是对数据的初始化,可以理解成java中的构造器一样的功能。

​ os.path.join()此函数是将路径整合在一起赋值给self.path

​ os.listdir()此函数是返回self.path路径下包含的文件夹或文件夹的名字的列表,重点是它返回的是一个列表,这个列表中包含了文件夹下面的文件的信息

python 复制代码
    def __getitem__(self, index):

        img_name = self.img_name_path[index]
        img_item_path = os.path.join(self.path, img_name)
        img = Image.open(img_item_path)

        label = self.label_dir
        # 返回的是图片和名字
        return img, label

    def __len__(self):
        return len(self.img_path)

​ getitem这个函数的功能主要是对列表中的图片信息进行整合和赋值

相关推荐
逢生博客25 分钟前
使用 Python 项目管理工具 uv 快速创建 MCP 服务(Cherry Studio、Trae 添加 MCP 服务)
python·sqlite·uv·deepseek·trae·cherry studio·mcp服务
堕落似梦32 分钟前
Pydantic增强SQLALchemy序列化(FastAPI直接输出SQLALchemy查询集)
python
白熊18835 分钟前
【计算机视觉】CV实战项目 - 基于YOLOv5的人脸检测与关键点定位系统深度解析
人工智能·yolo·计算机视觉
nenchoumi311937 分钟前
VLA 论文精读(十六)FP3: A 3D Foundation Policy for Robotic Manipulation
论文阅读·人工智能·笔记·学习·vln
后端小肥肠1 小时前
文案号搞钱潜规则:日入四位数的Coze工作流我跑通了
人工智能·coze
LCHub低代码社区1 小时前
钧瓷产业原始创新的许昌共识:技术破壁·产业再造·生态重构(一)
大数据·人工智能·维格云·ai智能体·ai自动化·大禹智库·钧瓷码
-曾牛1 小时前
Spring AI 快速入门:从环境搭建到核心组件集成
java·人工智能·spring·ai·大模型·spring ai·开发环境搭建
阿川20151 小时前
云智融合普惠大模型AI,政务服务重构数智化路径
人工智能·华为云·政务·deepseek
自由鬼1 小时前
开源AI开发工具:OpenAI Codex CLI
人工智能·ai·开源·软件构建·开源软件·个人开发
生信碱移1 小时前
大语言模型时代,单细胞注释也需要集思广益(mLLMCelltype)
人工智能·经验分享·深度学习·语言模型·自然语言处理·数据挖掘·数据可视化