四足机器人调试思路梳理

1)落地场景及技术分层:

四足机器人本身具有四个方向进行梳理:

A)工业巡检,电厂,化工厂

B)公共安全,消防侦查,排爆,

C)商业服务,引流,导览,智慧园区巡检

D)科研教育,高效算法验证平台

E)建筑工地,进度监控,测绘辅助

L4---AI大脑,强化学习&大模型

L3---视觉感知,识别台阶,仪表和障碍物

L2---导航定位

L1---运动控制

导航与SLAM:

自驾-- 车轮递推+GPS+地图(高精,SD)+感知物体(车道线,车沿,显示牌)

机器狗--四足高程地图+激光雷达+深度信息+IMU+语义

RL:从环境中得到reward,能够自我学习如何走路,形成参数

LLM Intergration:自然语言交互:"去检查变压器温度"机器人解析意图->规划路径->视觉识别异常

2)四足机器人RL:

测试环境:

A)场景:

斜坡(最大30度)

楼梯(高度15-20cm)

草地、台阶、碎石路

积水区域

狭窄通道
B)动态:

表演动作及串联

打滑及外向力抗扰性

姿态以及跟线速度

Sim2Real的Gap

仿真里完美,实物上翻车

A)弄清楚所有奖励函数,表示每个参数的具体意义

B)修改参数前,需要检查 坐标系,URDF,电机限制值(力矩,机械限位等),电机模型,硬件等

C)记录给与同样command值,以及过程观测值,

command值:LineVelocity,Yawrate及场景

obeservation值:IMU值,各个Joint Torque,Position,Velocity,Acceleration,功耗情况

进行数据回访和记录,最后也可以利用相同command在mujuco仿真看仿真的观测值与实际记录观测值的gap

D)优化点

速度跟随性,可能借助lidar等外闭环传感器

姿态的优雅和稳定性

整体能耗降低,以及电机发热控制

后面有详细的文章介绍

3)四度机器人未来新技术趋势:

A)本身MPC步态控制及落足点传统控制依旧需要学习

B)视觉-力触觉融合:让机器狗"感觉"更灵敏

C)大模型应用:让机器狗理解复杂指令

D)能耗优化:延长续航时间

E)极限运动:后空翻、跑酷,全地形的适用性

F)仿真到现实的迁移经验

4)立个Flag

A)读2-3篇最新论文及会议视频,期刊等,主要是基于新技术趋势,摘要学习

B)研究开源项目,并且和小伙伴进行复现和摘要学习

C)学习新的算法和工具

相关推荐
feasibility.3 小时前
用OpenClaw做qq ai办公机器人(支持群聊关键词触发+自定义域名发送任意邮件)
人工智能·科技·阿里云·机器人·agi·qq·openclaw
人机与认知实验室1 天前
2028年春晚,会出现机器人主持人吗?
人工智能·机器人
硅谷秋水1 天前
mimic-video:机器人控制的可泛化视频-动作模型,超越VLA模型
人工智能·机器学习·计算机视觉·机器人·音视频
人机与认知实验室1 天前
新一代人-机器人-环境智能体系的架构-机制-方法-验证
架构·机器人
田里的水稻2 天前
LPC_激光点云定位(LSLAM)-正态分布变换(NDT)
人工智能·算法·数学建模·机器人·自动驾驶
诸葛务农2 天前
Kinect Azure及其在人形机器人中的应用(下)
microsoft·机器人·azure
weixin_446260852 天前
win11本地部署openclaw实操第2集-让小龙虾具有telegram机器人能力和搜索网站能力
机器人
视觉人机器视觉2 天前
海康机器人3D 机器人引导 —— 空间基础篇一
3d·机器人
诸葛务农2 天前
Kinect Azure及其在人形机器人中的应用(上)
microsoft·机器人·azure