【调研】YOLO算法在FPGA/ZYNQ上的部署与加速

FINN 是 AMD 研究与高级开发部门综合通信和人工智能实验室开发的机器学习框架。它为在 FPGA 上探索和实施量化神经网络推理解决方案提供了端到端流程。FINN 生成数据流架构作为空间中实施的自定义网络的物理表示。它不是通用的 DNN 加速解决方案,而是依赖于协同设计和设计空间探索来进行量化和并行化调整,从而根据资源和性能要求优化解决方案。

特征

  • 模板化的 Vitis HLS 和 RTL 流组件库: FINN 附带 HLS 和 RTL 模块库,可将神经网络层实现为流组件。
  • 通过数据流实现超低延迟和高性能:通过为每一层组合流式传输组件,FINN 可以生成能够以亚微秒延迟对图像进行分类的加速器。
  • 许多端到端示例设计:我们提供的示例从训练量化神经网络开始,一直到在硬件上运行的加速设计。这些示例涵盖了一系列数据集和网络拓扑。
  • 快速设计生成的工具流: FINN 工具流支持自动或手动为每层分配单独的计算资源,并生成完整的设计以供综合。这样可以快速探索设计空间。

FINN 团队由 Ralph Wittig 领导的 AMD 研究成员(AMD 研究与高级开发部)以及 Allen Chen 领导的定制与战略工程部成员组成,与 Pynq 团队密切合作。

从左上到右下:Yaman Umuroglu、Michaela Blott、Thomas Preusser、Jakoba Petri-Koenig、Lucian Petrica、Nicholas Fraser、Linus Witschen、Ken O'Brien、Tobias Alonso Pugliese、Petra Hrg

从左上到右下:Eamonn Dunbar、Kasper Feurer、Aziz Bahri、John Monks、Mirza Mrahorovic

相关推荐
guo_xiao_xiao_13 小时前
YOLO人物肖像发型分类目标检测数据集
yolo·目标检测·分类
前网易架构师-高司机14 小时前
带标注的羽毛球运动员,裁判,羽毛球识别数据集,识别率84.4%,2879张图,支持yolo,coco json,voc xml,文末有模型训练代码
xml·yolo·json·数据集·羽毛球·裁判
guo_xiao_xiao_18 小时前
YOLO室内训练场橙色环形训练圈目标检测数据集-156张
人工智能·yolo·目标检测
FriendshipT1 天前
Ultralytics:解读 YOLO26 知识蒸馏
人工智能·pytorch·python·深度学习·yolo
LabVIEW开发1 天前
LabVIEW 如何把地下震源定位误差做到5米内
fpga开发·labview·labview知识·labview功能·labview程序
Dr.kangder1 天前
嵌入式处理器架构解析(十)——DSP+FPGA
fpga开发·架构·嵌入式
szxinmai主板定制专家1 天前
Zynq MPSoC实现半导体真空腔体状态监测|FPGA多传感器时序同步采集方案
fpga开发·zynq·控制器·mpsoc·半导体设备·fpga同步
学习FPGA的电气小兴兴1 天前
基于FPGA的DDS信号发生器设计,生成频率可调的正弦波、三角波、锯齿波和方波
fpga开发·数字信号处理·fpga·vivado·dsp·dds·diy
向哆哆2 天前
铁路障碍物目标检测数据集分享(适用于YOLO系列深度学习分类检测任务)
深度学习·yolo·目标检测
szxinmai主板定制专家2 天前
Zynq MPSoC半导体高精度运动控制方案|FPGA硬件插补实现亚微米级伺服实时控制
人工智能·嵌入式硬件·fpga开发·zynq·运动控制·ethercat