Hugging Face · 每日论文· 媒体 / 作者来源·精选
研究:给LLM补上答案首词,可纠正最多一半的闭卷问答错误
原文标题
On the Tip of the Tongue: First-Token Cueing as a Behavioral Probe of Recall Failures in LLMs
AI 导读
研究者提出 First-Token Cueing 行为探针:闭卷问答时先补上标准答案的第一个 token。在16个开源模型上,这一步可纠正英文多token答案错误的两成到五成,并在7种语言基准上普遍提升准确率。分析显示模型不确定性在首个答案 token 处最高,且已能预测对错;被纠正的错误大多也能由模型自行采样推理解出。
来源:Hugging Face · 每日论文 · arxiv.org
导读与选稿说明
论文提出可复用的推理时探针,并在16个开源模型和7种语言上给出首token纠错比例及与自采样推理的一致性证据,适用于研究闭卷事实召回失败。
导读由模型辅助整理,非独立核验。完整信息见原文。