2024-2-27 学习笔记(Pytorch训练提速,视觉大模型简介,SAM标注流程优化)

1.消除训练瓶颈,8点PyTorch提速技巧汇总

**摘要:**这篇文章提供了8个PyTorch的训练加速技巧,包括优化硬件、测试训练瓶颈、图片解码、数据增强加速、数据预读取、多GPU并行处理、混合精度训练以及其他细节。通过这些技巧,可以提高PyTorch训练大型数据集的速度。

**Raiden说:**实操性很强的指导。对于训练速度,学生在实验室很难感知。真正的现场环境,往往也是产品的重要指标之一。目前客户能忍受的训练时长最多也就四五个小时,Yolov8的模型勉强能达到这个训练速度。

2.深入浅出,万字长文全面解读视觉大模型

**摘要:**这篇文章详细介绍了视觉大模型的基础模型、预训练、对话式的视觉语言模型以及其他相关内容。它探讨了视觉系统对于理解和推理视觉场景的重要性,并介绍了一些生成式学习的方法和预训练数据集。此外,文章还讨论了基于对话式的视觉语言模型和一些应用领域的具体模型,如医学图像分割、遥感图像分割和导航规划。

Raiden说:此文章可以和多模态大模型综述论文《Multimodal Foundation Models:From Specialists to General-Purpose Assistants》一起学习。

3.使用Segment Anything(SAM)模型进行自动标注

**摘要:**Meta开源了一个图像分割模型【SegmentAnything Model】,简称SAM模型,号称分割一切,在短短开源的一周内,截止今天Github已经24k的star了!该模型可以用于自动标注图像数据集。

**Raiden说:**之所以点名这一篇文章,不是想再去介绍下SAM。截止到现在,各家AI平台,如果不支持SAM,恐怕也实在过于落伍了。

点名的意义是发现这个开源标注工具有个细节:"先选择类别再标注"。而一般的标注流程都是先标注再选类别。显然,某些场景只需要连续的批量的标注某一类时,"先选择类别再标注"操作效率更高。标注软件后续可以考虑加入这一设置。

相关推荐
山岚的运维笔记8 分钟前
ComfyUI NVIDIA安装教程:官方便携版下载+run_nvidia_gpu.bat启动,8G显存Windows实操
运维·服务器·windows·笔记·prompt·aigc·comfyui
HIT_Weston14 分钟前
242、【AI】【模型部署】基座模型研究:注意力机制深入
人工智能·模型部署
智碳能碳管理平台15 分钟前
碳排放核算软件选型:历史台账断层补救与锁账回放实操指南
人工智能·数字孪生·能碳管理系统·智碳能碳管理平台·企业能碳管理系统·碳排放核算软件·绿色工厂申报saas
知识分享小能手20 分钟前
C++ 学习教程,从入门到精通,C++ 友元、异常和其他特性 — 详细知识点(15)
开发语言·c++·学习
IT_陈寒27 分钟前
SpringBoot自动配置坑了我一把,原来是这样绕过去的
前端·人工智能·后端
hahaha601636 分钟前
Shades-of-Gray (SoG) 算法--白平衡算法
人工智能·嵌入式硬件·算法·计算机视觉
海宇大数据37 分钟前
零信任架构实战:基于海宇活体识别V步骤1构建自动化远程公证会话初始化网关
运维·人工智能·架构·自动化
Latchh1 小时前
前端导出的JPEG红字发糊,质量要拉到100才清楚
前端·图像处理·人工智能·计算机视觉
ebiobiz1 小时前
极海 APM32 使用 Nimmake 编译指南
c++·python·单片机·嵌入式硬件·mcu
思考着亮1 小时前
2.skill
人工智能