MOSP:一种用于机器人采集的繁育棉质多方向采摘计划

MOSP: A Multi-Orientation Sequential Picking Planning for Robotic Harvest of Breeding Cotton


棉花的导向识别和定位

模块1:OrentCot-YOLO模块(机器人的"眼睛")

给机器人装了个专门识别棉花的AI模型,找到了棉花,还得分清它朝哪个方向

基础模型:YOLOv11

针对性改造(关键优化):

输入预处理:给图片做亮度、对比亮度整

特征提取优化:加了一层卷积层、加了SE注意力模块

特征融合优化:调整了模型里不同尺寸特征的通道数,让它能同时识别不同尺寸的棉花特征,计算量少了38%

检测头优化:改了模型的输出部分,不用预设锚框,结合专门的损失函数,提升密集小棉花的识别准确率

模块2:棉花三维定位

核心原理:用相机的投影模型,把2D图片里的棉花位置,转换成3D空间坐标

具体步骤:第一步:在RGB图片里,用YOLO模型找到棉花,标出它在图片里的像素坐标(U,V)

第二步:用深度相机拍的对齐深度图,找到棉花对应的深度值

第三步:用相机的内参(焦距f,光心坐标c)

模块3:目标优先级选择(机器人采摘顺序)

第一步:按行筛选:先按机器人前进方向(Y轴)给棉花排序,优先采摘前面的

第二步:筛选候选目标,以当前要摘的棉花未参考,只选和它Y轴方向不超过50-150mm的棉花,保证采摘的连续性

第三步:距离加权,计算机械臂当前位置和每个候选棉花的三维距离,距离越近优先级越高

模块4:收获导向判断(机器人的采摘姿势)

棉花有朝向,机械臂不能谁便伸手过去摘,不然容易把棉花碰掉,所以要根据棉花的朝向选择最合适的采摘面

核心思路:把棉花的朝向和机械臂的5个采摘面做匹配,选方向最贴合的哪个面去摘

相关推荐
tuanxiang7 分钟前
在线AI生成率检测:平台投稿内容合规排查踩坑实录
人工智能
machnerrn14 分钟前
智慧交通系列(一)-十字路口车辆闯红灯检测告警抓拍系统(附含数据+源码+模型)
人工智能·python·深度学习
AKAMAI17 分钟前
超大规模的新定义
人工智能·云计算
未来和明天31 分钟前
领嵌4G/5GAI边缘计算盒子多路视频算力高达10.4Tops兼容Modbus、DLT645、OPC UA等多种行业协议
人工智能·5g·边缘计算
万联WANFLOW33 分钟前
Meta开源了能本地跑的agent
运维·服务器·网络·人工智能·业界资讯
Bruce_Liuxiaowei33 分钟前
安全意识培训——大模型在安全培训中的创新应用
人工智能·安全·ai·智能体
2601_9563198835 分钟前
2026年用示例、拆解和练习提升量化理解效率
人工智能·python
飞哥数智坊38 分钟前
WorkBuddy 帮我把吃灰的 ima 收藏,变成了每日知识速览
人工智能·agent
学习中.........41 分钟前
Karpathy nanoGPT 教程到底讲了什么
人工智能·算法·语言模型
ZYJCSZKJ1 小时前
AI数字人直播系统的技术架构与多方言交互实现方案——基于广西区域商业场景的工程实践
人工智能·架构·交互