跳到正文
原文
rohanpaul_ai· @rohanpaul_ai · X·· 3 小时前AI 评分59

Google 论文提出 Thinking-in-Bets,减少 Gemini 智能体的迎合式修改

AI 导读

Google 论文提出 Thinking-in-Bets,让 Gemini 智能体在看到用户反馈前记录主要主张、检查过程和置信度,以减少错误撤销已正确完成的工作。

正文 · AI 翻译

谷歌最新论文发现,如果 Gemini AI 智能体先写下自己检查了哪些内容以及有多大把握,那么当用户错误地说“这是错的”时,它们撤销正确工作的可能性就会大幅降低。

当用户说“这是错的,重做一遍”时,智能体往往会重写已经通过测试的代码。要求它们坚持原判断反而会适得其反,因为这样一来,它们会忽略真正存在的 bug。

Thinking-in-Bets 会让智能体在看到回复之前,私下记下自己的主要结论、支持这些结论的检查以及有多大把握。受到质疑时,它只会重新检查有争议的结论;如果用户的抱怨含糊不清,它会询问具体是哪种情况失败了。

在对 5 个 Gemini 模型的补丁评审中,面对一句没有具体说明的抱怨,智能体错误放弃正确需求的比例为 12.2%;使用检查清单时,这一比例仅为 0.02%。在报告评审中,抱怨出现后再写检查清单,通过率只有 65%;而事先写好检查清单时,通过率为 89%。

接收用户反馈的智能体,应当在读取回复前记录自己核实了哪些内容,以及有多大把握。

– arxiv. org/abs/2610.34654

标题:“Thinking-in-Bets at Test Time Reduces Sycophantic Revisions in LLM Agents”

来源:rohanpaul_ai · x.com