跳到正文
原文
HuggingPapers· @HuggingPapers · X·· 7 小时前AI 评分47

AgentSWE 基准测试:编码智能体能力不足

AI 导读

AgentSWE:编码智能体能构建你真正想要的智能体吗? 一个涵盖创建、编辑和优化的新基准,共 25 个任务。当前的构建者表现不佳:50 次创建运行平均得分 11.2/100,其中 20 次得分为零。

正文 · AI 翻译

AgentSWE:编码智能体能否构建出你真正想要的智能体?

一个涵盖创建、编辑和优化三大类、共25项任务的新基准。当前的构建者表现不佳:50次创建任务运行的平均分仅为11.2/100,其中20次得分为零。

来源:HuggingPapers · x.com