四相机设计实现全向视觉感知的开源空中机器人无人机

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题:

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

OAK-4p-New

为了弥合这一差距,我们提出了基于深度学习的 OmniNxt 全向视觉算法+ OAK-4p-New 全景硬件同步相机套装,这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验,验证了OmniNxt在实际应用中的卓越性能。(效果如下)

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在: https://github.com/HKUST-Aerial-Robotics/OmniNxt 找到;

我们提供了所提出系统中每个关键模块的docker镜像

项目页面:https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料:OAK-4P-New -https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网:https://www.oakchina.cn/

OAK使用教程:https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到

相关推荐
小O的算法实验室2 小时前
IEEE IOTJ,面向三维山区森林火灾巡检的多无人机多目标灰狼算法
无人机
Williamtym3 小时前
PickGo Lab实践:用浏览器、Python和MCP串起机器人搬运仿真
开发语言·python·机器人
2035去旅行4 小时前
大疆M400机型介绍
无人机
2035去旅行4 小时前
大疆 PSDK介绍
无人机
禁默4 小时前
Embodied VideoAgent 论文解读:机器人怎样持续记住动态场景
人工智能·机器人
szxinmai主板定制专家5 小时前
ZYNQ 数据采集方案踩坑总结:电力强电磁干扰、工业现场多协议适配优化
运维·人工智能·fpga开发·机器人·zynq
空堂与归6 小时前
英伟达开源ASPIRE:机器人自己攒Skill
人工智能·机器人·开源·agent
sxgzzn9 小时前
电力设备故障定位与特种电缆局放监控技术分析
重构·无人机·gis局放在线监测·矿用高压电缆绝缘故障检测装置·光伏运维管理系统
Gary Studio9 小时前
轮足机器人-IMU部分
机器人
禁默10 小时前
机器人的手,为什么拿个杯子都这么难?一文看懂“灵巧操作“
人工智能·microsoft·机器人