端到端自动驾驶

自动驾驶主要流程:感知->预测->规划

预测是预测周围目标(车、行人、动物等)的轨迹,规划是规划自车的运动轨迹。

UniAD[CVPR 2023]:

使用transformer架构,统一自动驾驶流程 ,完成所有检测,跟踪,建图,轨迹预测,占据栅格预测与规划的端到端推理。

参考:

CVPR 2023 Award Candidate | 自动驾驶通用算法框架UniAD - OpenGVLab的文章 - 知乎

https://zhuanlan.zhihu.com/p/616433397

VAD[ICCV2023]:

核心在于场景表征使用矢量化 的方式,非图像常用的栅格化。好处就是可以加快推理。

【「你好,开发者」 ICCV 2023 VAD 基于矢量化环境表征的高效端到端自动驾驶框架】 https://www.bilibili.com/video/BV12u4y1V7zV/?share_source=copy_web

FusionAD

基于BEV统一相机和雷达多模态输入 。task使用类似FPN的层级结构。

https://hub.baai.ac.cn/view/28712

Tesla FSD V12

AD-MLP

仅仅使用了传感器数据,利用简单的mlp网络,就在nuscene plan数据集上得到了很好的效果。说明nuscene plan数据集过于简单,仅在这个上面做开环测试不能很好的说明问题,需要引入其他的如仿真环境中做更多的闭环测试。

参考:

端到端自动驾驶算法在 nuScenes 数据集上的开环评测或许并不靠谱 - Muyun99的文章 - 知乎

https://zhuanlan.zhihu.com/p/654533840

相关推荐
二二孚日4 分钟前
自用华为ICT云赛道AI第三章知识点-昇腾芯片硬件架构,昇腾芯片软件架构
人工智能·华为
蹦蹦跳跳真可爱5891 小时前
Python----OpenCV(几何变换--图像平移、图像旋转、放射变换、图像缩放、透视变换)
开发语言·人工智能·python·opencv·计算机视觉
蹦蹦跳跳真可爱5891 小时前
Python----循环神经网络(Transformer ----Layer-Normalization(层归一化))
人工智能·python·rnn·transformer
夜阳朔1 小时前
Conda环境激活失效问题
人工智能·后端·python
小Lu的开源日常1 小时前
AI模型太多太乱?用 OpenRouter,一个接口全搞定!
人工智能·llm·api
mit6.8242 小时前
[Meetily后端框架] Whisper转录服务器 | 后端服务管理脚本
c++·人工智能·后端·python
Baihai IDP2 小时前
AI 系统架构的演进:LLM → RAG → AI Workflow → AI Agent
人工智能·ai·系统架构·llm·agent·rag·白海科技
沫儿笙2 小时前
弧焊机器人气体全方位节能指南
网络·人工智能·机器人
LONGZETECH2 小时前
【龙泽科技】新能源汽车维护与动力蓄电池检测仿真教学软件【吉利几何G6】
人工智能·科技·汽车·汽车仿真教学软件·汽车教学软件
jndingxin3 小时前
OpenCV 图像哈希类cv::img_hash::AverageHash
人工智能·opencv·哈希算法