大语言模型在端到端智驾中的应用

大语言模型在端到端智驾中的应用

双系统端到端

小鹏:AI天玑系统---神经网络XNet+规控大模型XPlanner+大语言模型XBrain

商汤绝影:DriveAGI

理想:端到端+VLM

VLA端到端

Waymo:EMMA

OPENEMMA

Wayve:LINGO-2

Awesome-VLM-AD-ITS Public
万字总结 - 2023大模型与自动驾驶论文走马观花

待看论文

VLM-AD:通过视觉语言模型监督实现端到端自动驾驶

WiseAD:基于视觉-语言模型的知识增强型端到端自动驾驶

Senna:连接大型视觉-语言模型和端到端自动驾驶

DriveGenVLM:基于视觉-语言模型的自动驾驶真实世界视频生成

攻克复杂驾驶场景!

SimpleLLM4AD:用于自动驾驶的端到端视觉语言模型

DriveMLM [42] 结合额外的激光雷达数据,并提出一种基于 LLaMA [40] 的多模态模型来提供高级驾驶决策

RAG-Driver [44] 并未提供端到端解决方案,而是使用 VLM 进行知识检索 和增强的可泛化驾驶解释

VLP [40] 将真实轨迹和边界框标签转换为文本特征用于对比学习,但它并没有引入现有监督标签之外的信息

相关推荐
橙色小博16 分钟前
PyTorch中的各种损失函数的详细解析与通俗理解!
人工智能·pytorch·python·深度学习·神经网络·机器学习
小森776744 分钟前
(三)机器学习---线性回归及其Python实现
人工智能·python·算法·机器学习·回归·线性回归
-XWB-1 小时前
【LLM】使用MySQL MCP Server让大模型轻松操作本地数据库
人工智能·python·自然语言处理
訾博ZiBo2 小时前
AI日报 - 2025年4月8日
人工智能
James. 常德 student2 小时前
深度学习之微调
人工智能·深度学习
liuyunshengsir3 小时前
chromadb 安装和使用
人工智能·大模型
FIT2CLOUD飞致云3 小时前
全面支持MCP协议,开启便捷连接之旅,MaxKB知识库问答系统v1.10.3 LTS版本发布
人工智能·开源
云水木石3 小时前
ChatGPT-4o 在汉字显示上进步巨大
人工智能·chatgpt
Mr_LeeCZ3 小时前
PyTorch 深度学习 || 7. Unet | Ch7.1 Unet 框架
人工智能·深度学习·机器学习
James. 常德 student3 小时前
多GPU训练
人工智能·pytorch·深度学习