Hugging Face · 每日论文· 媒体 / 作者来源·精选
LLM群体决策中的记忆失败:稀有性与相关性的权衡
原文标题
Rare, Relevant, and Still Wrong: How Memory Fails LLM Group Decisions
AI 导读
研究提出CrossProfile基准测试,包含60个自动验证答案的模板,测试了LLM群体决策中两种记忆策略:保留最稀有事实或保留与决策最相关事实。在Qwen2.5-7B、Llama-3.1-8B和DeepSeek模型测试中,两种策略均存在可预测的失败点。相关性选择会引入干扰项,稀有性选择在平均表现上不优于随机选择。决策模型还存在社会证明偏差,移除归属标签可提高准确率13-24点。
来源:Hugging Face · 每日论文 · arxiv.org
导读与选稿说明
研究揭示了LLM群体决策中记忆策略的系统性缺陷,提出了新的诊断基准CrossProfile,并验证了社会证明偏差对决策准确率的影响。
导读由模型辅助整理,非独立核验。完整信息见原文。