跳到正文
原文
arcprize· @arcprize · X·· 1 天前AI 评分25

ARC-AGI高、中推理token用量及得分对比

AI 导读

在公开任务上,ARC-AGI-1 的 high 设置平均每任务使用 49k 推理 token,medium 设置为 17k,得分分别为 39.8% 和 34.0%。在 ARC-AGI-2 上,high 设置平均每任务使用 76k 推理 token,medium 设置为 22k,得分分别为 1.9% 和 1.1%。

正文 · AI 翻译

在公开任务上,high 平均每个任务使用 49k 推理 token,而 medium 在 ARC-AGI-1 上使用 17k,得分分别为 39.8% 和 34.0%。在 ARC-AGI-2 上,high 平均使用 76k,medium 使用 22k,得分分别为 1.9% 和 1.1%。

来源:arcprize · x.com