PyTorch 深度学习之加载数据集Dataset and DataLoader(七)

1. Revision: Manual data feed

全部Batch:计算速度,性能有问题

1 个 :跨越鞍点

mini-Batch:均衡速度与性能

2. Terminology: Epoch, Batch-Size, Iteration

DataLoader: batch_size=2, sheffle=True

3. How to define your Dataset

两种处理数据的方式

Extra: num_workers in Windows

linux 与 windows 多线程不一样

改进

Example: Diabetes Dataset

4. Example: Using DataLoader

Classifying Diabetes

torchvision 内置数据集

MINIST Dataset

相关推荐
海天一色y14 小时前
模型部署的「通用语」:ONNX 转换
pytorch·onnx
2601_9629666414 小时前
数学与应用数学专业想进管理咨询,2027届秋招需要补哪些商业知识和技能?
人工智能
ss27314 小时前
AI全栈实战 | 3.2-01 Python 基础:四大数据容器怎么选,推导式为什么是 Pythonic 的灵魂
开发语言·人工智能·python
Sweet锦14 小时前
不调 Python,不装向量库:我用纯 Java 写了一套以图搜图引擎
java·人工智能·开源·图搜索
fpcc15 小时前
AI和大模型—JEV模型
人工智能
weixin_4462608515 小时前
面向演进式企业AI智能体技能的持续流程级评估
人工智能
量子-Alex15 小时前
【大模型后训练SFT】Finetuning with Sampling: SFT Learns Better Than You Think
人工智能·深度学习·机器学习
ForDreamMusk15 小时前
Transformer Encoder Block
人工智能·深度学习·transformer
W***259215 小时前
深度解读AI Work Agent长程任务执行的底层机制与落地边界
人工智能
打工仔折腾 AI15 小时前
LLaMA 1 到 LLaMA 3 架构演进拆解:从 RoPE、GQA 到词表扩张
人工智能·后端·python·深度学习·langchain·llama