AI 导读研究团队提出VerifierBench基准,包含来自6个代理基准的222个任务和4,993个隐藏测试案例,用于评估LLM代理生成可执行验证器的能力。测试显示19个模型的归一化平衡准确率在10.6%至62.1%之间,生成的验证器在拒绝无效解决方案方面比接受有效解决方案更可靠,但存在过度限制验证的问题。
AI 选稿理由提供了首个针对LLM代理验证器生成的基准测试,揭示了验证器在拒绝无效解决方案时的过度限制问题,为改进代理输出验证提供了新方法。
AI 导读针对大型语言模型(LLM)代理在未知和动态环境中需要主动探索、理解和适应环境动态的问题,研究人员提出了AdaExploreBench,一个用于评估主动探索和测试时自适应能力的基准。实验表明,主动和自适应的探索仍然具有挑战性,当前LLM代理在获取正确证据和识别先前获取的证据不再有效方面存在瓶颈。
AI 选稿理由解决了LLM代理在动态环境中主动获取证据和适应环境变化的瓶颈,有助于提升LLM代理在复杂环境中的表现。
AI 导读针对共享团队奖励难以追溯责任的问题,论文提出GRSE(Group-Relative Skill Evolution):同一问题在相同技能库下多次执行,对比结果来为智能体—技能对分配行为信用,并结构化诊断失败。在HotpotQA和LoCoMo上(两个开源权重模型),GRSE优于MASkills,多跳问题F1分别提升6.7和3.2;增益来自更有依据的检索,学到的技能可跨多跳任务迁移。面对被植入有害技能的库,GRSE正确判定每个植入技能的符号并恢复到干净库+6.3分,MASkills误判两个且低于起点。
AI 选稿理由提出按组内执行对比分配技能信用而非按是否出现计功,在两数据集多跳任务上提升F1并用植入有害技能实验验证纠错方向。
AI 导读本文提出了一种名为Vision-Language-Delta-Action(VLDA)的新范式,通过紧凑的Delta变量捕捉潜在的世界状态变化,作为视觉语言理解和动作生成之间的接口。VLDA通过统一目标学习Delta,包括局部过渡滤波器(LT-Filter)和全局过渡锚点(GT-Anchor),以改善长期一致性、鲁棒性和泛化能力。
AI 选稿理由VLDA通过紧凑的Delta变量捕捉潜在的世界状态变化,作为视觉语言理解和动作生成之间的接口,从而提高了机器人操作的长期一致性、鲁棒性和泛化能力。
AI 导读研究团队推出OpenDS任务和OpenDS-World基准,评估AI代理在真实开放网络环境中进行多步骤深度搜索的能力。该基准包含200个挑战性任务,涵盖多种信息模态、异构文件格式和交互访问要求。评估显示,最佳模型准确率为39.0%,而人类评估准确率为21.1%。研究揭示了模型在工具协调和长程搜索管理方面的持续挑战。
AI 选稿理由OpenDS-World提供了首个系统评估AI代理在真实开放网络环境中自主深度搜索能力的统一平台,包含200个多模态、异构格式的挑战任务,并揭示了当前模型在工具协调和长程搜索管理方面的显著差距。
AI 导读HarnessPro是一种无标签方法,通过递归自改进优化Harness,在提升任务性能的同时降低执行成本。该方法使用LLM生成的测试评估候选Harness,通过专业代理诊断执行轨迹并规划更新,提供轻量、平衡和高性能三种模式。实验显示,在多个基准测试中,HarnessPro的高性能模式相比RHO方法平均通过率提升2.0个百分点,单任务成本降低26.1%。
AI 选稿理由解决了Harness开发中的性能与成本权衡问题,为不同预算场景提供优化方案,显著降低AI代理执行成本。
AI 导读Anthropic承诺将5%股权用于公共利益基金,支持AI对经济和劳动力的影响;OpenAI测试新Aurora图像模型;Anthropic报告初级技术招聘比例下降,员工使用Claude提高生产力但监督工作增加;DeepSeek发布Search & Fetch API和DeepSeek-V4.1-Flash-1017模型;Replit将默认AI提供商更换为OpenAI;Stack Overflow for Agents通过ChatGPT插件实现用户量三倍增长;Qualcomm预测2028年手机将运行1000亿参数模型。
AI 选稿理由Anthropic设立首个AI公共利益基金,DeepSeek-V4.1-Flash-1017显著提升推理与编码能力并降低KV缓存占用,Replit和Stack Overflow的AI集成实践展示产业应用变化。
AI 导读研究团队提出MMedAgent-Plus,用视觉语言规划器统一调度18个专科模型,覆盖12项任务、8种模态。规划器在32个公开医疗基准的208,928个样本上指令微调;单工具多轮、多工具多轮、多工具单轮的调用准确率分别为91.0%、98.1%、80.7%。端到端在7项任务的350例中正确调用专科模型占90.6%,最终答案准确率0.98,最强基线为0.28。
AI 选稿理由给出多模态医疗Agent的工具调用准确率与端到端结果,并保留评测任务、样本量和基线对照,可作为医疗Agent工具编排的参考数据。
AI 导读论文指出,Agent把规则、摘要等抽象经验存入外部记忆后,其中的错误会经检索复用传导到后续决策,并通过“抽象—执行—再抽象”循环被重新生成,作者称之为错误复现。为此提出Anti-Persistence:只累积轨迹与结果,任务指导按需即时合成、执行后即丢弃,由自适应选择器依据既往结果决定是否及如何合成。在多个基准与骨干模型上,该设计取得更高的留出任务成功率与最低的平均LLM调用成本。
AI 选稿理由论文提出Anti-Persistence记忆设计并给出跨基准、跨骨干模型的对比结果:留出成功率更高且平均LLM调用成本最低,适用于基于外部记忆自我改进的Agent。
AI 导读研究团队提出Heartbeat Thinking方法,允许语音代理在用户说话期间持续执行推理和工具调用,通过定期调用Thinker处理最新部分转录文本和已完成推理结果,解决传统方法因语音更新中断工具调用的问题。在SpeechFCEval、FDBench v3和AudioCRAG基准测试中,该方法比SHANKS基线模型提高工具覆盖率16个百分点,并将平均最终响应延迟降低36.4%。
AI 选稿理由Heartbeat Thinking通过保持语音期间的持续计算,将等待时间转化为可重用的准备工作,显著提升了语音代理的工具覆盖率和响应速度。
AI 导读现代文本到图像(T2I)系统使用大规模语言预训练进行文本条件图像生成。本文提出Halcyon,一种早期融合的多模态自回归模型,完全从零开始在GPIC数据集上预训练,该数据集包含100M图像-文本对。Halcyon-0.52B在预训练计算量上比LlamaGen-XL/8少18.2倍,性能优于后者。Halcyon-1.6B在预训练计算量上比JiT-T2I-XXL/8++少275倍,性能也优于后者。控制实验表明,仅文本预训练不会提高T2I生成。Halcyon通过替换caption dropout为I2T监督,在不增加预训练预算的情况下,也能保持有竞争力的T2I生成质量。研究表明,强大的T2I系统可以在没有互联网规模语言预训练的情况下从头开始训练。代码和模型可在https://cs.stanford.edu/~keshik/halcyon获取。
AI 导读论文指出,GUI代理若在每一步都均匀输入截图、音频、视频、交互历史和设备状态等全模态信息,无关信号会随步骤变化成为干扰,误差回传会造成“序列分心”和轨迹漂移。为此作者提出FocusGUI,以步骤特定的决策参考动态压缩最相关证据为隐表示,注入冻结解码器的嵌入,仅用动作监督训练。在四个全模态骨干上平均Type Match提升33.2、Exact Match提升3倍。
AI 选稿理由提出只有动作监督训练、无需相关性标注与骨干微调的轻量适配器,给出四个全模态骨干上的Type Match与Exact Match量化提升,属全模态GUI代理方法进展。