四相机设计实现全向视觉感知的开源空中机器人无人机

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题:

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

OAK-4p-New

为了弥合这一差距,我们提出了基于深度学习的 OmniNxt 全向视觉算法+ OAK-4p-New 全景硬件同步相机套装,这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验,验证了OmniNxt在实际应用中的卓越性能。(效果如下)

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在: https://github.com/HKUST-Aerial-Robotics/OmniNxt 找到;

我们提供了所提出系统中每个关键模块的docker镜像

项目页面:https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料:OAK-4P-New -https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网:https://www.oakchina.cn/

OAK使用教程:https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到

相关推荐
蓝天居士9 小时前
EtherCAT从入门到精通(10)
机器人·嵌入式·ethercat
敢敢のwings10 小时前
Long-WAM 深度解析:机器人怎样记住过去、预测未来,并及时完成下一段动作
机器人
敢敢のwings14 小时前
从 VPP 到 VPP2:让机器人看懂未来,再把未来变成动作
机器人
小lo想吃棒棒糖15 小时前
把机器人训练从 GPU 搬到昇腾 NPU:启元 Q1 起身动作 PPO 训练全记录
python·机器人·昇腾·启元机器人
天树星智源16 小时前
机器人 VLA 一个模型同时动手和动脑:动作参数只占 0.21%,万级扰动任务 85.9%
论文阅读·机器人·vla·全身控制
FPGA小迷弟16 小时前
FPGA 与千兆以太网校验和:从原理到 Verilog 实现
嵌入式硬件·fpga开发·无人机·ai编程·fpga
lisw0516 小时前
基于神经网络的机器人导航系统的设计与执行!
神经网络·机器人·自动化
敢敢のwings18 小时前
机器人如何通过触觉认识物体:从材质分类到接触状态判断
分类·机器人·材质
米糕闯编程1 天前
鱼香ros2(二十五)导航
机器人·slam·ros2·launch·navigation2
于海风微醺1 天前
工业相机选型
数码相机·相机