跳到正文
/阅读与研究

外观

快速抵达

↑ ↓ 选择 · Enter 打开 · Esc 关闭MyHOT
中文动态

#开源生态.

正在确认更新状态可见页面每分钟只读检查
10月23日周五
  1. Hugging Face · 每日论文

    SCOPE:将自然语言策略编译为神经符号谓词程序

    AI 导读研究团队提出SCOPE方法,将LLM代理的策略编译为可执行程序,由小型模型、确定性提取器和组合代码执行。该方法通过对抗生成反例优化程序,在真实世界策略任务基准测试中取得最高平均准确率,且预测结果更稳定、可解释性强。

    AI 选稿理由SCOPE实现了可靠、可解释且高效的策略执行,适用于生产环境中的LLM代理策略管理。

  2. Hugging Face · 每日论文

    Looped Uniform Diffusion Language Models:循环提升扩散语言模型训练效率

    AI 导读研究团队在保持训练目标和采样器不变的情况下,将选择性循环应用于均匀扩散语言模型(UDLMs),显著提高了训练效率。循环UDLMs仅需约0.5万亿token训练量即可达到非循环UDLMs在1万亿token训练量下的验证NLL,在OpenWebText和FineWeb-Edu数据集上分别节省2.8倍和3.3倍训练FLOPs。在匹配NFE预算下,循环UDLMs生成困惑度降低最高达9.8%,且采用非均匀循环计数策略可进一步减少12%的循环次数而不降低准确率。

    AI 选稿理由该研究通过循环技术显著提升了扩散语言模型的训练效率,在保持模型性能的同时大幅减少了计算资源需求,适用于大规模语言模型训练优化。

10月22日周四
  1. Hugging Face · 每日论文

    RubatoCodec:带 utterance 级事件预算的自适应语音编解码与流式解码

    AI 导读研究提出 RubatoCodec,基于 X-Codec-2 实现可变帧率语音编解码,并用 Adaptive Firing 依据特征与波形频谱把语音切成时长可变的事件,每个事件由离散码加显式时长表示,可逐个事件流式解码。低事件率下重建保真度和可懂度优于定帧率;多语种模型在英、日、汉语上重建质量有竞争力,英日基准可懂度最佳;配套 TTS 的 WER 更低、UTMOS/UTMOSv2 更高,且无需生成时速率约束即可学会事件预算。代码与权重已开源。

    AI 选稿理由给出确切 utterance 级事件预算的可变帧率语音编解码与流式解码,并配套 TTS 实验验证,适用范围为语音重建与流式语音合成研究。

10月21日周三
  1. Hugging Face · 每日论文

    Agent S4让计算机使用Agent自行进化接口,OSWorld V2达21.3%新SOTA

    AI 导读论文提出Agent S4,让接口设计本身成为Agent能力:元智能体在无成功标签的合成任务轨迹上构建并修订接口仓库,再用种群式进化按验证任务表现筛选。在OSWorld V2上,搭配Qwen3.8-27B的Agent S4取得21.3%二元得分,是同模型固定接口的3.8倍,超过GPT-5.5(13.0%)和Claude Opus 4.8(20.6%),成本约为后两者的4.3%和1.5%;ScienceBoard成功率从41.4%升至58.6%。代码已开源。

    AI 选稿理由提出从任务经验自动进化Agent接口的方法,在OSWorld V2和ScienceBoard上以约1/4至1/15成本超过GPT-5.5与Claude Opus 4.8,为计算机使用Agent提供接口自进化的开源方案。

  2. Hugging Face · 每日论文

    Specter:用量化多步投机卸载加速MoE推理

    AI 导读Specter将量化、投机解码与专家卸载结合,用轻量量化草稿模型在设备上保留高保真的专家激活模式,从而提前预测并调度后续专家数据的搬移。在单请求推理下,相比当前最优系统,TPOT平均快1.50倍、最高1.88倍,使显存受限的单卡MoE推理更可行。代码已开源。

    AI 选稿理由给出量化草稿模型驱动多步专家预取的具体系统设计,并在单请求场景测得TPOT平均1.50倍、最高1.88倍加速,适用于受PCIe卸载瓶颈限制的MoE推理。

  3. Hugging Face · 每日论文

    Matrix-Game 4.0:用视频模型实时生成可玩游戏世界,RTX5090上480p 60FPS

    AI 导读Matrix-Game 4.0将游戏执行与画面生成分离:轻量游戏引擎维护世界状态并执行交互规则,多模态编码Agent把玩家想法转为游戏代码和动态场景描述,基于自回归视频模型的渲染器再把低多边形代理画面转为高保真视觉。单张RTX5090实现480p、60FPS,按键到显示延迟112ms;单步生成稳态83FPS,峰值显存18.2GiB,RTX5080和RTX5070Ti上分别为67FPS和58FPS。代码、模型权重和低多边形游戏资产已开源。

    AI 选稿理由给出可玩游戏世界的执行—渲染分离架构,并在单卡上实测延迟、帧率与显存,同时开源代码、权重和资产,为实时视频生成与游戏交互结合提供可复现基线。

10月20日周二
  1. Hugging Face · 每日论文

    Kronecker Delta Rule for Long Context Linear Attention

    AI 导读研究人员提出KronLSTM,一种基于Kronecker Delta Rule的新型线性注意力架构,通过最小侵入式内存修正机制减少信息干扰,特别适合长上下文语言建模。实验表明,KronLSTM在长上下文基准测试中表现优异,性能优于现有线性注意力架构,且内存动态稳定无需额外归一化机制。

    AI 选稿理由KronLSTM解决了长上下文建模中的内存干扰问题,为稳定的大规模语言模型提供了新的数学基础和开源实现。

  2. Hugging Face · 每日论文

    构建AI研究团队自主发现线性注意力架构

    AI 导读研究团队提出由不同学科背景的AI研究员组成的协作团队,通过保持独立研究历史、共享实验证据和自适应分配研究机会,在有限实验预算下持续发现新架构。该团队在1.3B规模线性注意力架构搜索中,于语言建模、常识推理和检索任务上超越GDN2模型。移除任何组织组件都会显著降低发现效果。

    AI 选稿理由提出多学科AI研究团队协作机制,在有限预算下实现持续科学发现,实验证明不同背景、独立历史和自适应分配对突破局部最优至关重要。

  3. Hugging Face · 每日论文

    分层稀疏注意力 SSA:极端稀疏下缩小与稠密注意力的差距

    AI 导读研究提出分层稀疏注意力 SSA,将确定性检索与分数引导采样结合,对残差 token 按其计入概率校正,从而找回检索集之外的注意力质量,统一涵盖 top-k、top-p 与混合采样。在 RULER、LongBench、LOFT、AIME 及 3B–27B 共五个模型上,SSA 在同等稀疏度下一致优于基线;在 RULER-HARD、Ministral-3-8B、50 倍注意力稀疏下,32K 准确率从 81.8% 升至 84.2%,128K 从 63.8% 升至 69.3%,分别恢复稠密性能的 94% 与 85%。配合优化 CUDA 内核,1M 上下文解码较 FlashInfer 最高提速 2.96 倍,代码已开源。

    AI 选稿理由在多个长上下文基准和五个模型上验证了极端稀疏时缩小与稠密注意力差距的方法,并给出 1M 上下文解码最高 2.96 倍的实测加速,适合关注长上下文推理效率的读者。

  4. Hugging Face · 每日论文

    从强化学习论文到框架代码:七个开源训练框架中的包含与审查

    AI 导读研究者追踪了七个开源强化学习训练框架,分析了它们在2025年1月至2026年6月期间对1,598篇论文的包含情况。研究发现,在180天内被包含的论文数量稳定在5到7篇,这些论文通常具有30B参数以上的训练策略,并经常修改现有损失函数的系数、clip、mask或权重。

    AI 选稿理由该研究提供了关于开源强化学习训练框架中包含和审查过程的详细数据,有助于理解这些框架如何采用新的强化学习方法。

  5. Hugging Face · 每日论文

    缓存工程:让Agent直接管理KV缓存,降低成本27.7%

    AI 导读针对Agent长轨迹中KV缓存I/O与存储成为主要成本、裁剪历史又会触发重新预填充的问题,作者提出“缓存工程”:Agent可用drop把选定缓存排除出后续注意力,用repos调整保留键的位置编码,无需改动轨迹前缀。团队将历史依赖视为服务难题并联合设计AKV引擎,以无状态接口内部管理缓存复用、驱逐与恢复。工具响应滚动丢弃策略使平均基准分提高1.7分、平均成本降低27.7%;AKV输出吞吐最高1.2倍,P95请求延迟加速1.5倍;缓存策略递归自改进再降本7.1%。代码已开源。

    AI 选稿理由提出不改轨迹即可控制活跃KV缓存的drop/repos操作,并给出AKV引擎与量化收益,适用于长轨迹Agent推理服务优化。

  6. Hugging Face · 每日论文

    DiffResearch:使用扩散语言模型加速深度研究

    AI 导读研究团队提出DiffResearch框架,将扩散语言模型(dLLM)应用于深度研究的每个阶段。在100项Deep Research Bench任务中,扩散模型比自回归模型快约6倍,主要得益于规划和写作阶段的显著提速。团队还引入dFast模式,通过读取中间去噪状态提取子查询,实现1.99倍速度提升且不降低报告质量。基于更强扩散模型的系统在排行榜上超越多个商业系统。DiffResearch已以Apache-2.0许可证开源。

    AI 选稿理由扩散语言模型在深度研究框架中实现端到端速度提升6倍,dFast模式进一步加速分解过程,且报告质量保持不变,开源框架可促进研究应用。

10月19日周一
  1. Hugging Face · 每日论文

    BSD:用自蒸馏统一跨词表与闭源API教师

    AI 导读研究提出 Bridged Self-Distillation(BSD)框架:外部教师只提供离线推理轨迹,作为特权上下文;学生模型自身在无上下文条件下生成 rollout,再由同一学生的上下文条件副本充当自教师,在学生自身词表空间为这些 rollout 打分,并结合验证器结果信号调整失败轨迹的更新。由于教师只需输出文本,该方法统一适用于共享词表、跨词表和闭源 API 教师场景,在各类场景中均优于基线和专用方法,代码已开源。

    AI 选稿理由提出一种只依赖教师文本输出的统一在线蒸馏框架,覆盖跨词表和闭源API教师等此前需分别处理的情形,并公开代码,适用于研究蒸馏方法者参考。

  2. Hugging Face · 每日论文

    TokenGate:通过学习式 token 剪枝让 LLM 长上下文预填充提速 1.4–11.3 倍

    AI 导读论文提出 TokenGate,一个可即插即用的小型组件,通过 token 重要性分数重加权注意力 logits 的“token 门控注意力”机制,实现长上下文输入端到端可学习的 token 剪枝,缓解模型逐层处理全部 token 的成本。实验显示其在不损失精度的前提下将首 token 时间(TTFT)提升 1.4–11.3 倍、峰值内存降低 1.5–3.4 倍;相比此前最优 token 剪枝方法,预填充最快提升 6.4 倍、内存降低 2 倍。该方法可扩展至 Qwen3 等标准 transformer 与 Qwen3.5 等混合注意力模型,代码已开源。

    AI 选稿理由提出可端到端训练的 token 剪枝组件 TokenGate,在不损失精度下将长上下文 TTFT 提速 1.4–11.3 倍、峰值内存降低 1.5–3.4 倍,并覆盖标准与混合注意力模型,代码开源。

  3. Hugging Face · 每日论文

    WildAWM 合成 341 个长程计算机使用环境,训练 Qwen 模型在 8 项基准上提升

    AI 导读研究提出 WildAWM 流水线,用开源模型合成同时支持图形界面、MCP 服务和命令行的可执行环境。通过执行式质量门控——异质智能体 rollout、交叉评判一致性和反事实探针——合成 341 个环境任务对,部分需超过 100 步,GPT-6-Astra 仅解出 60%。两个不同规模 Qwen 模型仅在合成环境中训练,在覆盖网页、claw 和计算机使用智能体的 8 个分布外基准上均取得明显提升。

    AI 选稿理由提供了一套全开源、可复用的计算机使用智能体环境合成流水线,并给出 341 个长程任务和跨 8 个分布外基准的训练结果,适用于关注智能体训练方法与评测的研究者和工程师。

10月16日周五
  1. Hugging Face · 每日论文

    LILIE:用语言信息损失改进视觉生成,JiT 模型 gFD 降低 14 点

    AI 导读论文提出 LILIE(语言信息无损图像编码器),一种可逆图像变换,通过归一化流 Transformer 与视觉-语言模型联合训练,使 VLM 能从加噪特征中恢复描述文本。研究者用 LILIE 损失训练 JiT 模型,在 GPIC 数据集上相比纯像素损失基线将 gFD 从 66.84 降至 53.01。代码、编码器与生成模型已开源。

    AI 选稿理由提出语言信息监督的可逆图像编码器 LILIE,在 GPIC 数据集上将 JiT 模型 gFD 从 66.84 降至 53.01,相比像素损失基线降低 14 点,并开源代码与模型。

10月15日周四
  1. Hugging Face · 每日论文

    DuET:用双编码器 Transformer 把钢琴演奏转录为乐谱

    AI 导读研究提出 DuET 双编码器 Transformer,把音符级演奏 MIDI 转乐谱(PM2S)转录与帧级节拍、强拍跟踪联合学习,并用双向交叉注意力连接两个编码器、自回归解码器交替预测乐谱属性;同时引入 TimeRoPE 和 TPRoPE 编码相对时间与音高关系。在 ASAP 与自建 Gangqinpu 数据集上,MUSTER 平均误差分别从 11.30% 降至 11.22%、从 6.56% 降至 3.64%,代码、权重与演示已开源。

    AI 选稿理由把节拍帧级信息引入音符级转谱,缓解无音符起音处节拍缺失的问题,改善时值与记谱时长,代码权重开源可供音乐转录研究直接复用。