Hugging Face Blog·· 4 小时前精选AI 评分66
Microsoft ThinkingBox 基准上线 Hugging Face,以数据库终态和 20 次重复评测智能体
The Agent Said It Was Done. The Database Disagreed.
AI 导读
Microsoft 与 Hugging Face 联合发布 ThinkingBox 沙箱和 ThinkingBox-Bench 基准,覆盖 507 个有状态业务工作流,每任务独立运行 20 次,以终端数据库状态和副作用而非工具调用来打分,现可通过 OpenEnv 接口运行。
推荐理由
原文给出以终态数据库为准的评测方法和一致性成本数据,读者可据此重新审视自己评估 agent 的指标选择。
来源:Hugging Face Blog · huggingface.co