借助 NVIDIA TAO 为数万亿台设备开发和优化视觉 AI 模型

这篇文章最初发表在 NVIDIA 技术博客上。

全球的开发者正在利用 NVIDIA TAO 工具套件 构建 AI 驱动的视觉感知和计算机视觉应用程序。现在,得益于该平台的显著增强和强大的生态系统支持,这一过程变得比以往更快、更简单。

NVIDIA TAO 工具套件 支持超过 10 种计算机视觉和视觉 AI 模型,包括图像分类、物体检测、三种类型的分割、光学字符识别 (OCR)、动作识别、关键点估计、身体姿态估计、嵌入模型、连体网络等。

TAO 工具套件的入门速度比以往更快,支持超过 NVIDIA NGC 上的 40 个预训练模型。利用 TAO 的方法可以随着用于调整各行各业模型的工作流而不断扩展。如需了解详情,请参阅 借助 NVIDIA TAO 和视觉 AI 模型变革工业缺陷检测 和 自定义 AI 模型:使用 NVIDIA TAO 训练角色检测和识别模型。

大规模采用

TAO 的下载量已超过 10 万次,而 TAO 预训练模型的下载量接近 100 万次。TAO 是开源的。此外,解决方案提供商可以访问 TAO,将其更自定义地集成到他们的服务中,并以更细致的粒度探索平台的内部运作。

领先的 MLOps 和云服务正在利用 TAO 来改进其服务。与 MLOps 平台集成,例如 Weights & Biases 和 ClearML,有助于简化机器学习 (ML) 工作流程,并为模型训练实现更好的实验跟踪。TAO 还可以与各种云 ML 和 Kubernetes 服务配合使用,例如 Azure ML、GCP Vertex AI、Azure AKS、AWS EKS 和 GCP GKE。

各大企业也在将 TAO 构建到其行业特定的 AI 开发工作流中,包括 PepsiCo 在消费者供应链中、Pegatron、Siemens 等在制造行业中、以及 ExxonMobil 在世界各地的大城市和机场都在使用 TAO。

专为 AI 工作流程打造

各种规模的企业都在使用 TAO 构建自己的视觉 AI 工厂和开发工作流。这些 AI 工作流越来越需要 TAO 现在提供的以下三种功能。

首先,TAO 可以处理最新的 AI 模型和算法,包括基础模型调优、生成式 AI 和视觉 Transformer。其次,TAO 可以与仿真方法(例如 NVIDIA Omniverse Replicator)和 Stable Diffusion 配合使用。第三,TAO 包含企业级支持,作为开发工作流程中的必要工具,即 NVIDIA AI Enterprise。

在数万亿台设备上应用先进的 AI 技术

借助 TAO, NVIDIA 可通过 ONNX 和 TFLite 模型导出,在远边缘的数万亿设备上灵活部署新的 AI 模型,同时强大的生态系统采用全球领先的提供商和边缘 AI 软件平台。

ARM 利用 TAO 优化 Ethos NPU 设备上的 AI 运行时,STMicroelectronics 使用 TAO 首次在 STM32 微控制器上运行复杂的视觉 AI。Edge Impulse 和 Nota 将 TAO 集成到其边缘 AI 平台中,为客户提供边缘优化的解决方案。

开始使用

下载 NVIDIA TAO 工具套件,开始构建由 AI 驱动的视觉感知和计算机视觉应用。请访问 NVIDIA 开发者 TAO 论坛 获取更多信息。

加入 ST 边缘 AI 峰会,NVIDIA 副总裁兼嵌入式和边缘计算总经理 Deepu Talla 将于 12 月 6 日发表演讲,介绍如何构建新一代边缘 AI 平台,以及 NVIDIA TAO 如何不断发展。

阅读原文

相关推荐
wflynn12 天前
GitHub 今日推荐|SCSKiller:游戏着色器预编译消除卡顿
开源·c#·github·nvidia·amd·directx12
kakakahahahaha14 天前
LoadLibrary failed with error 87 排查:ERROR_INVALID_PARAMETER、DLL路径、架构与显卡驱动
windows·电脑·笔记本电脑·nvidia·软件需求
智码看视界18 天前
AI 推理优化 | Triton Inference Server 架构解析:单机多模型并发推理的工业级方案
nvidia·模型部署·mlops·triton·gpu推理·推理服务化·动态批处理
My的梦想已实现1 个月前
代工显卡驱动更新
nvidia·显卡驱动·魔改·代工显卡
DeeplyMind1 个月前
Part 2.1 — uvm_va_block_t 解剖:每页位图与 PTE 状态
nvidia·uvm
纪伊路上盛名在1 个月前
BioIR:生物大分子结构预测推理库
nvidia·工程化·软件·蛋白质·结构预测·推理库
hanchenxing1 个月前
本地AI绘画网关: 用 30 行 Python 把 NVIDIA FLUX.2 Klein 接入 OpenAI 兼容客户端Python
开发语言·python·ai作画·ai绘画·nvidia
码流怪侠1 个月前
Sunshine 深度拆解:当 NVIDIA GameStream 闭源后,如何用 4 万颗 Star 重建自托管云游戏
游戏·github·nvidia
ShallWeL1 个月前
Orin 上多模型常驻与显存预算
人工智能·嵌入式硬件·nvidia·orin
每日出拳老爷子1 个月前
【AI】Ollama 更新后 skipping CUDA 掉回 CPU
gpu·nvidia·cuda·ollama·本地大模型