跳到正文
/阅读与研究

外观

快速抵达

↑ ↓ 选择 · Enter 打开 · Esc 关闭MyHOT
原文
Hugging Face · 每日论文· 媒体 / 作者来源·精选

CRM-Agent-Bench:评估企业环境中工具使用代理的基准测试

原文标题

CRM-Agent-Bench: Benchmarking Tool-Using Agents in Stateful Enterprise Environments

AI 导读

Salesforce推出CRM-Agent-Bench基准测试,包含555个有状态多轮任务,覆盖9个商业领域和36个能力标签。该基准通过任务特定可执行合同评估代理系统,严格成功率为64.32%至83.60%,领先系统在成本和领域可靠性上差异显著。框架可扩展,旨在衡量基于合同的业务交易完整性和合规性。

来源:Hugging Face · 每日论文 · arxiv.org

导读与选稿说明

首个针对企业环境中工具使用代理的综合基准测试,提供可审计的评估框架,覆盖多领域业务流程。

导读由模型辅助整理,非独立核验。完整信息见原文。