大语言模型在端到端智驾中的应用

大语言模型在端到端智驾中的应用

双系统端到端

小鹏:AI天玑系统---神经网络XNet+规控大模型XPlanner+大语言模型XBrain

商汤绝影:DriveAGI

理想:端到端+VLM

VLA端到端

Waymo:EMMA

OPENEMMA

Wayve:LINGO-2

Awesome-VLM-AD-ITS Public
万字总结 - 2023大模型与自动驾驶论文走马观花

待看论文

VLM-AD:通过视觉语言模型监督实现端到端自动驾驶

WiseAD:基于视觉-语言模型的知识增强型端到端自动驾驶

Senna:连接大型视觉-语言模型和端到端自动驾驶

DriveGenVLM:基于视觉-语言模型的自动驾驶真实世界视频生成

攻克复杂驾驶场景!

SimpleLLM4AD:用于自动驾驶的端到端视觉语言模型

DriveMLM [42] 结合额外的激光雷达数据,并提出一种基于 LLaMA [40] 的多模态模型来提供高级驾驶决策

RAG-Driver [44] 并未提供端到端解决方案,而是使用 VLM 进行知识检索 和增强的可泛化驾驶解释

VLP [40] 将真实轨迹和边界框标签转换为文本特征用于对比学习,但它并没有引入现有监督标签之外的信息

相关推荐
Linux猿几秒前
可持续社会价值报告2024 AI向善 | 附PDF
人工智能
后端小张4 分钟前
【AI 学习】深入解析卷积神经网络(CNN):理论、实现与应用
人工智能·深度学习·神经网络·opencv·学习·自然语言处理·cnn
说私域5 分钟前
基于AI智能名片链动2+1模式S2B2C商城小程序的商户端微商平台构建研究
大数据·人工智能·小程序
心疼你的一切6 分钟前
多模态AI与视觉语言模型
目标检测·microsoft·机器学习·ai·语言模型·自然语言处理
那雨倾城7 分钟前
PiscCode基于 YOLO 的人员分割 + PPE 检测绑定:一种工程级安全合规判定方案
图像处理·人工智能·安全·yolo·目标检测·计算机视觉
sunshineine8 分钟前
YOLOv9论文详解
人工智能
永霖光电_UVLED10 分钟前
CHIPX Global 计划在马来西亚建设一座 8 英寸氮化镓/碳化硅(GaN/SiC)晶圆制造工厂
人工智能·生成对抗网络·制造
ytgytg2811 分钟前
Dify1.11.1+Ollama0.13.5安装说明
语言模型
得贤招聘官11 分钟前
招聘决胜起跑线:AI重构决策级招聘新范式
人工智能
云计算小黄同学11 分钟前
AI × 软件工程 / SRE 学习清单(工程师版)
人工智能·学习·软件工程