Hugging Face · 每日论文· 媒体 / 作者来源·精选
Foundation4D：统一多相机驾驶视频的感知与重建模型
原文标题
Foundation4D: Towards a unified perception and reconstruction model for autonomous vehicles
AI 导读
研究提出前馈模型 Foundation4D，用共享骨干和分解式时空注意力，从多相机驾驶视频同时完成几何估计、3D 检测、语义占用与高斯重建；视频推理用位姿图优化细化相机轨迹并拼接目标轨迹。团队还发布含 1253 段驾驶片段的 PAI-Foundation4D 基准。按基准微调后，在 Waymo 和 nuScenes 取得最低深度 AbsRel，nuScenes 检测 mAP 最高，OpenOccupancy 占用 mIoU 最高。联合训练使检测 top-class mAP 提升 1.2 点，几何与检测共训把相机到支架平移误差降低 13.4%。预测几何与轨迹还作为无激光雷达 NuRec 的先验。
来源：Hugging Face · 每日论文 · arxiv.org
导读与选稿说明
新论文给出多任务驾驶感知与重建的统一前馈模型，并在 Waymo、nuScenes、OpenOccupancy 报告深度、检测、占用指标及联合训练增益，附 1253 段驾驶片段的标注基准。
导读由模型辅助整理，非独立核验。完整信息见原文。