arcprize· @arcprize · X·· 1 天前AI 评分
ARC-AGI高、中推理token用量及得分对比
在公开任务上,ARC-AGI-1 的 high 设置平均每任务使用 49k 推理 token,medium 设置为 17k,得分分别为 39.8% 和 34.0%。在 ARC-AGI-2 上,high 设置平均每任务使用 76k 推理 token,medium 设置为 22k,得分分别为 1.9% 和 1.1%。
在公开任务上,high 平均每个任务使用 49k 推理 token,而 medium 在 ARC-AGI-1 上使用 17k,得分分别为 39.8% 和 34.0%。在 ARC-AGI-2 上,high 平均使用 76k,medium 使用 22k,得分分别为 1.9% 和 1.1%。
来源:arcprize · x.com