在OAK 4 系列上以480帧运行神经网络

随着DepthAI 3.4.0 版本 的发布,我们为OAK 4系列设备引入了一项激动人心的新功能:高帧率( HFR )模式 。该功能突破了实时感知的极限,可实现每秒高达 480 的处理速度------同时保持神经网络以同样惊人的速度运行。

这不仅仅是高速捕捉------更是高速人工智能,而这所有的一切,均由 OAK 4 系列产品自身实现!

本次更新 : 高帧率( HFR )模式

HFR模式目前可在搭载 RVC4 平台的OAK 4 系列设备上 使用,该设备采用IMX 586图像处理器。它展示了下一代DepthAI管线功能的初步预览。

启用HFR后,您可以:

  1. 以最小运动模糊捕捉超高速运动
  2. 在每一帧上运行神经网络
  3. 实现超低延迟感知循环

支持的 HFR 分辨率

启动时,HFR模式支持两种固定配置:

  1. 1920×1080@240 帧/秒
  2. 1280×720@480 帧/秒

这些模式目前是固定的,尚不支持分辨率缩放和任意FPS选择。但计划在未来的版本中提供额外的灵活性。同时,您可以使用ImageManip根据需要调整输出。

480 FPS 神经网络

HFR模式的一个突出特征是能够以全帧率运行神经网络

例如,对象检测Demo 以480 FPS 的速度运行YOLOv6,从而在快速移动的环境中实现实时检测。这为以下方面开辟了新的可能性:

  • 工业自动化
  • 机器人所需的快速反馈
  • 运动分析
  • 高速检测系统

示例应用

该版本包括三个展示HFR功能的示例管线:

1.物体检测 (YOLOv6 @ 480 FPS)

使用HFR输入,运行实时对象检测。

2.小型实时预览

以240或480 FPS显示轻量级预览流。

3. 视频编码

编码并保存高帧率视频流。

性能洞悉

所有示例都包括一个BenchmarkIn节点,该节点报告运行时性能和延迟。以下是一个示例输出:

复制代码
[2025-08-14 23:31:49.487] [ThreadedNode] [warning] FPS: 474.3766
[2025-08-14 23:31:49.487] [ThreadedNode] [warning] Messages took 1.0118543 s
[2025-08-14 23:31:49.487] [ThreadedNode] [warning] Average latency: 0.05904912 s

这代表着:

  • 接近最高帧率的吞吐 (~480 FPS)
  • 较低的端到端延迟 (~59 ms)
  • 稳定、实时的管线处理

高帧率感知不再只是高速拍摄,捕捉更多的帧,而是在此基础上理解更多、更快!了解****OAK 4 系列请点击:

相关推荐
彬鸿科技1 分钟前
bhSDR Studio/Matlab入门指南(十一):AI数据集采集实验界面全解析
人工智能·matlab·软件定义无线电
云烟成雨TD15 分钟前
Spring AI Alibaba 1.x 系列【63】AI Agent 长期记忆
java·人工智能·spring
武雄(小星Ai)23 分钟前
2026年AI Agent框架选型指南:LangGraph vs CrewAI vs Claude SDK vs OpenAI SDK
人工智能·aigc·agent
狒狒热知识27 分钟前
2026年AI传播新闻软文营销发布当下178软文网领衔发展路径
大数据·人工智能
黑巧克力可减脂44 分钟前
以智录声,以技留韵:AI录音,解锁声音留存的古今新范式
人工智能
智慧景区与市集主理人1 小时前
巨有科技景区智能导览告别传统讲解,打造沉浸式智慧游览体验
人工智能·科技·语音识别
keyanbanyungong1 小时前
告别杂乱病历!临床科研AI工具实测
人工智能·深度学习
出海小龙1 小时前
B2B 跟 B2C 的联盟营销有何根本区别?以及分别如何真正推动增长?
大数据·人工智能
xcLeigh1 小时前
聚合AI工具KULAAI:GPT、Claude、Gemini、DeepSeek热门模型一键使用
人工智能·gpt·claude·gemini·deepseek·聚合ai·kulaai
EnCi Zheng1 小时前
09aaac-RMSNorm是什么?
人工智能