Hugging Face · 每日论文· 媒体 / 作者来源·精选
视觉-语言-动作模型机制性研究:特征不平等与脆弱性解析
原文标题
Not All Features Are Created Equal: A Mechanistic Study of Vision-Language-Action Models
AI 导读
研究团队开发了解释性管道,发现视觉-语言-动作(VLA)模型将任务指令编码为绝对坐标程序,导致对物体位置变化的脆弱性。通过激活注入实验,模型在99.6%的案例中执行源任务的轨迹,即使面对不同场景。研究还发现不同架构对指令的权重分配差异,以及目标选择与动作生成的分离机制。团队发布了Action Atlas交互平台,包含520+训练SAEs、79个识别概念及UR10e实验结果。
来源:Hugging Face · 每日论文 · arxiv.org
导读与选稿说明
提供了视觉-语言-动作模型的内部工作机制解释,揭示了其脆弱性的根本原因,并开源了可复用的分析工具与数据集。
导读由模型辅助整理,非独立核验。完整信息见原文。