四相机设计实现全向视觉感知的开源空中机器人无人机

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题:

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

OAK-4p-New

为了弥合这一差距,我们提出了基于深度学习的 OmniNxt 全向视觉算法+ OAK-4p-New 全景硬件同步相机套装,这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验,验证了OmniNxt在实际应用中的卓越性能。(效果如下)

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在: https://github.com/HKUST-Aerial-Robotics/OmniNxt 找到;

我们提供了所提出系统中每个关键模块的docker镜像

项目页面:https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料:OAK-4P-New -https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网:https://www.oakchina.cn/

OAK使用教程:https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到

相关推荐
bing_feilong1 小时前
Mid360(2):运行livox_ros_driver2的demo失败
ubuntu·机器人
IT猿手4 小时前
基于 ZOH 离散化与增量 PID 的四旋翼无人机轨迹跟踪控制研究,MATLAB代码
开发语言·算法·matlab·无人机·动态路径规划·openclaw
IT猿手4 小时前
基于控制障碍函数(Control Barrier Function, CBF)的无人机编队三维动态避障路径规划,MATLAB代码
开发语言·matlab·无人机·动态路径规划·无人机编队
IT猿手5 小时前
基于 CBF 的多无人机编队动态避障路径规划研究,无人机及障碍物数量可以自定义修改,MATLAB代码
开发语言·matlab·无人机·动态路径规划
格林威6 小时前
工业相机图像高速存储(C++版):RAID 0 NVMe SSD 阵列暴力提速,附海康实战代码!
开发语言·c++·人工智能·数码相机·计算机视觉·工业相机·堡盟相机
rit84324996 小时前
光场相机成像过程及空间域重对焦仿真
数码相机
workflower6 小时前
需求-什么时候才算完成
人工智能·机器人·集成测试·ai编程·软件需求
IT猿手7 小时前
基于强化学习Q-learning算法的无人机三维路径规划算法原理与实现,MATLAB代码
算法·matlab·无人机·路径规划·动态路径规划
xwz小王子8 小时前
Biomimetic Intelligence and Robotics最新综述:走进类生命机器人的奇妙世界
机器人
2301_766558658 小时前
本地部署+云端优化:矩阵跃动龙虾机器人,实现7×24小时AI获客无人值守
人工智能·矩阵·机器人