AgentSWE基准揭示编码智能体能力不足
先了解这件事
AI 综述
2026年10月13日,X用户AK (@_akhaliq) 发布了关于AgentSWE基准测试的消息。该基准旨在评估编码智能体能否构建用户真正想要的智能体,涵盖创建、编辑和优化三类任务,共包含25个任务。测试结果显示当前的智能体构建者表现不佳:在50次创建运行中,平均得分仅为11.2/100,其中20次运行得分为零。
报道时间线
10月13日
- AgentSWE 基准测试:编码智能体能力不足
AgentSWE:编码智能体能构建你真正想要的智能体吗? 一个涵盖创建、编辑和优化的新基准,共 25 个任务。当前的构建者表现不佳:50 次创建运行平均得分 11.2/100,其中 20 次得分为零。