四相机设计实现全向视觉感知的开源空中机器人无人机

开源空中机器人

基于深度学习的OmniNxt全向视觉算法+OAK-4p-New 全景硬件同步相机

机器人的纯视觉避障定位建图一直是个难题:

系统实现复杂

纯视觉稳定性不高

很难选到实用的视觉传感器

为此多数厂家还是采用激光雷达的定位方案。

OAK-4p-New

为了弥合这一差距,我们提出了基于深度学习的 OmniNxt 全向视觉算法+ OAK-4p-New 全景硬件同步相机套装,这是一个具有全向感知的完全开源的空中机器人软硬件解决方案。

OmniNxt

OmniNxt能够在有限的计算资源占用下实现全向避障、精确定位和实时稠密建图。我们进行了大量的飞行实验,验证了OmniNxt在实际应用中的卓越性能。(效果如下)

【开源】利用四鱼眼相机设计实现全向视觉感知的开源空中机器人无人机

更多信息

OmniNxt所有硬件和软件均可在: https://github.com/HKUST-Aerial-Robotics/OmniNxt 找到;

我们提供了所提出系统中每个关键模块的docker镜像

项目页面:https://hkust-aerial-robotics.github.io/OmniNxt

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~分割线

相机资料:OAK-4P-New -https://www.oakchina.cn/product/oak-4p-new/

OAKChina官网:https://www.oakchina.cn/

OAK使用教程:https://docs.oakchina.cn/en/latest/

其他资料可以在B站、知乎等找到

相关推荐
Hello-FPGA6 小时前
CameraLink相机模拟器 信号源加速激光雷达系统算法开发
数码相机
生成论实验室7 小时前
机器人:一个自主运动的系统
人工智能·算法·语言模型·机器人·自动驾驶·agi·安全架构
双翌视觉8 小时前
机器视觉系统为何离不开光学滤光片?
人工智能·数码相机·视觉检测·制造
Dick5079 小时前
ROS2 常用命令表
人工智能·学习·算法·机器人
沫儿笙10 小时前
川崎机器人二保焊节气设备
人工智能·机器人
C++ 老炮儿的技术栈11 小时前
Qt工控实战:自研机器人TCP长连接客户端(粘包处理+心跳保活+自动重连完整源码解析)
qt·tcp/ip·机器人
Deepoch11 小时前
VLA多模态架构加持 采摘机器人实现精细化智能采收
人工智能·机器人·开发板·具身模型·deepoc·采摘
选与握11 小时前
$\pi_{0.7}$: 一个具备涌现能力的可引导的通用机器人基础模型
机器人·vla·pi07
YOLO数据集集合12 小时前
无人机航拍地质灾害智能识别 山体滑坡实例分割数据集落地实战 | 泥石流监测 道路险情封堵 深度学习模型训练方案10296期
人工智能·深度学习·yolo·目标检测·无人机
梦想的旅途212 小时前
企业微信外部群自动化:一期交付应聚焦双向会话闭环
java·开发语言·机器人·自动化·maven·企业微信