四相机设计实现全向视觉感知的开源空中机器人无人机

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题:

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

OAK-4p-New

为了弥合这一差距,我们提出了基于深度学习的 OmniNxt 全向视觉算法+ OAK-4p-New 全景硬件同步相机套装,这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验,验证了OmniNxt在实际应用中的卓越性能。(效果如下)

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在: https://github.com/HKUST-Aerial-Robotics/OmniNxt 找到;

我们提供了所提出系统中每个关键模块的docker镜像

项目页面:https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料:OAK-4P-New -https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网:https://www.oakchina.cn/

OAK使用教程:https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到

相关推荐
微小冷5 小时前
二关节机器人系统模型推导
线性代数·机器人·概率论·推导·拉格朗日函数·二关节机器人·机器人控制系统的设计
kyle~5 小时前
计算机视觉---RealSense深度相机技术
人工智能·数码相机·计算机视觉·机器人·嵌入式·ros·传感器
双翌视觉7 小时前
机器视觉对位中的常见模型与技术原理
数码相机·计算机视觉·机器视觉
视觉语言导航12 小时前
RAL-2025 | 清华大学数字孪生驱动的机器人视觉导航!VR-Robo:面向视觉机器人导航与运动的现实-模拟-现实框架
人工智能·深度学习·机器人·具身智能
BFT白芙堂13 小时前
睿尔曼系列机器人——以创新驱动未来,重塑智能协作新生态(上)
人工智能·机器学习·机器人·协作机器人·复合机器人·睿尔曼机器人
lingling0091 天前
结构光相机:重塑工业自动化的“智慧之眼”,驱动智能制造新未来
数码相机
Blossom.1181 天前
机器学习在智能建筑中的应用:能源管理与环境优化
人工智能·python·深度学习·神经网络·机器学习·机器人·sklearn
Mr.Winter`1 天前
障碍感知 | 基于3D激光雷达的三维膨胀栅格地图构建(附ROS C++仿真)
人工智能·机器人·自动驾驶·ros·具身智能·环境感知
AiTEN_Robot1 天前
AGV 无人叉车关键技术问题解析:精准定位算法 / 安全避障逻辑 / 系统对接协议全方案
人工智能·机器人·自动化·制造
云卓SKYDROID1 天前
无人机3控接力模式技术分析
无人机·通道·遥控器·高科技·云卓科技