跳到正文
原文
arcprize· @arcprize · X·· 4 小时前AI 评分56

ARC Prize 公布 Reflection AI Beam 1.0 在 ARC-AGI 上的成绩与成本

AI 导读

ARC Prize 公布 Reflection AI 的 Beam 1.0 在 ARC-AGI (Verified) 上的成绩:ARC-AGI-2 得分 23.5%,每题成本 $0.61;ARC-AGI-1 得分 74.0%,每题成本 $0.31。Beam 的最佳成绩出现在 xhigh 推理档位,但在 ARC-AGI-2 上 high 档位接近,得分为 20.0% 对比 23.5%,成本约低 43%。

正文 · AI 翻译

@reflection_ai 的 Beam 1.0 在 ARC-AGI 上的成绩(已验证):

- ARC-AGI-2:23.5%,每题 $0.61

- ARC-AGI-1:74.0%,每题 $0.31

Beam 的最佳成绩是在 xhigh 推理档位下取得的,但在 ARC-AGI-2 上 high 档位也很接近:20.0% 对比 23.5%,成本低约 43%。

来源:arcprize · x.com