karinanguyen· @karinanguyen · X·· 3 小时前AI 评分
前沿 AI 智能体参与中期选举预测基准测试
研究团队正在开展一项实时基准测试,评估前沿 AI 能否预测美国中期选举。每个智能体拥有独立沙箱、互联网访问权限和 $500 预算,每日根据新证据更新预测,选举后将与顶尖超级预测者、选举评论员及 Kalshi 和 Polymarket 的群体判断比较准确率。
我们正在开展一项实时基准测试,看看前沿 AI 能否预测中期选举!
选举是对 AI 智能体能否推理不确定的未来、根据新证据更新自身信念并作出校准预测的一次绝佳现实世界检验。
我们为每个智能体提供了独立的沙盒、互联网访问权限以及 500 美元的预算。它们每天都会更新预测,还可以申请数据或额外资源。选举结束后,我们将把它们的准确性与顶级超级预测者、选举评论人士,以及 @Kalshi 和 @Polymarket 上的群体智慧进行比较。
来源:karinanguyen · x.com