推理能力 主题资料+ 模型推理能力的进展:思维链、推理模型、数学与逻辑基准的突破与争议。
270 篇文章
最新文章 第 261–270 条 · 共 270 条 08:00 AI 导读 研究者提出 DAGFormer,在标准 Transformer 残差连接之外增加从浅层到深层的直接连接,并由与模型联合训练的拓扑预测器根据输入 token 控制每条连接的强度;与现有逐层独立设置连接的跨层路由架构不同,它一次性规划整个模型的路由。在 75M 到 1B 参数、与 OLMo-2 匹配的对比中,WikiText-2 困惑度比原版 Transformer 低 17%–25%,1B 版本用 5B token 训练即优于用 10B token 训练的原版模型;在 13 项常识、科学、阅读和数学评测任务上平均准确率高 2.0–2.5 分,指令微调后 AlpacaEval 胜率 63%–70%,结构化剪枝下六种设置中有五种退化最小。
AI 选稿理由 把跨层连接由逐层独立决策改为全局联合规划,在同等参数与算力下显著降低困惑度并提升下游任务表现,也为剪枝鲁棒性提供了一种可复用的架构设计思路。
05:00 AI 导读 MIT McGovern 研究所团队 10 月 9 日在 PNAS 发表论文,提出衡量人工神经网络生物学合理性的关键指标是自组织能力,而非仅看性能。他们构建的网络从多层随机连接单元出发,仅靠“同时激活的神经元连接增强”等简单规则,就能自我重组为有效的信息处理网络,学会模式识别和图像分类,性能与依赖反向传播的网络相当。研究目标是理解大脑如何学习,并可能反哺机器学习。
AI 选稿理由 该工作展示了无需外部设计者、仅靠简单局部规则即可自组织出学习能力的网络,为神经科学提供更贴近生物的学习模型,也为脑机接口等需要理解神经元交互规则的应用提供基础。
02:05 AI 导读 研究团队推出CyberArena,首个动态对称攻防对抗基准测试,让两个AI智能体在隔离沙箱中同时扮演攻击者和防御者,应对不断变化的服务环境。该基准通过466场比赛评估了12个前沿LLM智能体,能够区分智能体的攻防能力,并提供了可扩展的实验平台。
AI 选稿理由 解决了网络安全AI智能体评估中静态基准无法测试实时攻防能力的问题,为研究动态对抗环境下的智能体提供了新工具。
00:01 Google DeepMind 精选AI 关注评分 86 86 AI 导读 Google DeepMind 发布 Gemini 4 Argon,定位为通用物理推理模型,在 Embodied Reasoning(ERQA)基准上以纯推理取得 87%,称超过其他前沿模型。
AI 选稿理由 官方给出 Argon 在 ERQA 上的得分与四类机器人工作流示例,可据此判断物理推理模型的当前能力边界。
00:01 Google DeepMind 精选AI 关注评分 92 92 AI 导读 Google DeepMind 发布 Gemini 4 Argon,面向开发者、企业和消费者开放,通过 Gemini API、AI Studio、Google Antigravity 以及 Gemini 应用和 Search 的 AI Mode 提供,入门价每百万输入 token 2 美元、输出 token 10 美元。
AI 选稿理由 官方给出 Argon 在编码、科研与安全对齐上的具体案例和定价,可据此判断前沿模型在长程任务中的落地方式。
08:00 AI 导读 DisaggKD框架将教师模型和学生模型分离到不同节点,通过流式传输隐藏状态、行窗口和词汇分片的蒸馏损失,避免形成完整词汇表logits,并使用预取环协调生产者和训练者。在Qwen3.5-35B-A3B到9B模型对上,分离布局与同节点布局的损失相同且速度更快;融合损失使同节点训练在更少节点上加速,而分离布局在学生跨多节点时内存效率更高。在大规模模型对中,融合损失的同节点运行仍会内存溢出,而分离布局可成功训练。
AI 选稿理由 DisaggKD解决了知识蒸馏中教师模型受单GPU内存限制的瓶颈,使大规模模型蒸馏训练成为可能,显著提升训练效率和可扩展性。
08:00 AI 导读 研究者发布 Game2Real-Bench 基准,覆盖细粒度感知、空间推理、约束推理与序列规划四类能力,包含 1000 个可执行验证的程序化游戏样本和 400 个按推理需求对齐的真实样本。评测 25 个 VLM 后发现游戏与真实任务表现高度一致(相关系数 0.935);one-shot 游戏中,部分模型的约束推理提升,但细粒度感知下降。团队还构建了含约 24K 样本、18 类任务、65 个 QA 家族的 Game2Real-Dataset。
AI 选稿理由 该基准首次系统验证游戏任务与真实视觉推理的对应关系,并给出可执行验证的数据集,可供 VLM 评测与训练选择数据来源时参考。
08:00 AI 导读 本期头条是微软发布第三代自研 AI 加速器 Maia 300,称每兆瓦性能提升 40%,计划 2027 年起大规模部署;Meta 发布首批前沿级模型 Muse Wonder 与 Wonder Full,强化编码、基准表现和记忆用户信息能力。深度内容涉及 AI 生成软件的责任归属、Anthropic 测试模型自主复制能力、以及昂贵闭环任务为何难以训练。研究方面介绍了以不到 1% 预训练成本改造 Transformer 架构的 Priming 技术,以及 GLM-Legal 在 Harvey LAB 上 19.2% 全通过率。快讯还提到 Claude Opus 5.5 灰度测试、智谱 GLM-5.3-Highspeed 灰度上线约 490 tokens/s 等。
AI 选稿理由 微软 Maia 300 给出每兆瓦性能提升 40% 并计划 2027 年大规模部署,Meta 首批前沿模型与 Anthropic 自我复制研究同期刊出,均属可能改变算力成本与模型能力边界的关键动向。
20:30 AI 导读 本期介绍 TasteVal 对 AI 科研能力的评测、HSS 视觉推理基准,以及 Reflection 和 Mistral 的模型进展;作者进一步讨论科研自动化、政府跨实验室训练与 AI 太空工业化的可能性。
AI 选稿理由 把模型成绩、训练成本与科研自动化联系起来,适合追踪下一阶段能力变化;自我改进与太空部分提供作者的长期视角。
06:13 AWS Machine Learning Blog 精选AI 关注评分 62 62 AI 导读 xAI 的 Grok 4.7 已在 Amazon Bedrock 上线,提供 500K token 上下文窗口和 low、medium、high、xhigh 四档可配置推理强度,通过 bedrock-runtime 端点的跨区域推理配置文件提供服务,支持 Responses、Chat Completions 和 Converse API。
AI 选稿理由 文章给出 Grok 4.7 在 Bedrock 上的接入方式、四档推理强度与跨区域路由选择,便于评估长任务智能体的成本与延迟取舍。
上一页 1 … 12 13 14