端到端模型的主流方案

一、表征特征

技术路线 核心思路 数据结构 代码成果
密集 BEV 栅格 多视角图像投影到Bev平面,形成像素级语义/占用网格,作为下游所有模块共享的特征。 规则密集张量 [H, W, C](2D BEV)或 [X, Y, Z, C](3D占用) BEVFormer(2022) BEVFusion(2022) OccNet(2023)
稀疏查询 可学习的 Query 表示目标和地图元素,避免对空白区域做无意义的密集计算。 固定长度嵌入集合 [N_q, D]:查询本身为抽象向量,可通过锚框或参考点绑定显式几何先验 DETR3D(2022) StreamPETR(2023) Sparse4D(2023) SparseDrive(2024) SparseAD(2024) HiPro-AD(2025)
矢量化表征 折线表示静态地图元素,边界框+轨迹表示动态目标,将场景建模为完全结构化的矢量元素集合,提供显示的实例级几何约束。 变长集合 [N, P, D]:[N_map, P_pts, D_pt](地图折线)、[N_agent, 1+T, D](目标框+轨迹) VectorNet(2020) VAD(2023)

二、感知输出

技术路线 核心思路 代表
Query-based 少量 Query 预测,天然避免 NMS,适合端到端。 DETR3D、SparseDrive
密集预测 对特征图每个位置独立分类/回归,输出密集语义。 BEVFormer 、OccNet

三、规控输出

技术路线 核心机制 代表
Query-based Query 表示候选轨迹或直接回归轨迹。 VAD、WoTE、SparseDrive
Diffusion-based 噪声中迭代去噪,采样多模态轨迹。 DiffusionDrive、VDRive
Autoregressive-based 将轨迹点作为序列,逐个自回归生成 ARTEMIS
相关推荐
码云之上1 小时前
Prompt 拦不住 Chatbot 的安全问题:九大风险与分层防护
人工智能·架构·全栈
具身AGI1 小时前
一个纹理球,让 VLA 操作大面积失败
人工智能
AI 极客1 小时前
Google AI模式开始主动“盯”价格和库存:当AI搜索从“问一次”变成“持续监控”,企业的GEO打法要跟着调整
人工智能·搜索引擎·geo
项目治理之道1 小时前
金融科技部主导的“科技一体化管理“革命维普 Visual ALM 如何以 AI Agent 重塑项目管理全链路
人工智能·项目管理工具·项目管理软件·项目管理系统·全生命周期管理
small_wh1te_coder1 小时前
Anthropic技术总监级拆解大模型 第16讲:GPU 与 CUDA 大模型计算到底是怎么跑起来的?
人工智能
nap-joker1 小时前
多维整合分析揭示了遗传结构、风险因素及脑部衰老的健康后果
人工智能·生物年龄·dense-net·人口统计学·生活方式·常见与罕见遗传变异
一只废狗狗狗狗狗狗狗狗狗1 小时前
深度学习为什么好?
人工智能·深度学习
guslegend1 小时前
工程地基、Provider 与 ReAct 循环:Agent 核心能力的设计、实现与验收
人工智能·agent·react·架构设计·spring ai
桃西西呀1 小时前
Spring AI Alibaba 之九:我让 Agent 接着上一轮往下聊,它却只还给我一条消息,多轮记忆到底藏在哪
人工智能·spring·llm