跳到正文
原文
rohanpaul_ai· @rohanpaul_ai · X·· 2 小时前AI 评分57

Meta 论文:主动式助手的关键难点在于自主决定何时打断

AI 导读

Meta 一篇新论文指出,主动式助手(如 AI 眼镜)没有用户提问,需要从全年个人记忆中找到触发事实并自主决定何时开口、说什么,失败点主要在时机选择而非内容生成。

正文 · AI 翻译

Meta 的一篇新论文表明,主动式助手的失败之处在于自行决定何时打断,而不仅仅是说什么。

主动式助手(如 AI 眼镜)不会收到查询。它们必须通过在一年的个人记忆中找到作为依据的事实,来决定何时开口以及说什么,而不是由别人直接提供。

他们构建了 ProPerMem:第一人称视角视频,搭配一个干扰项丰富、长达一年的记忆库,平均包含 618K 个 token,并带有经人工核实的触发窗口。只有当助手在窗口内恰到好处地开口,且内容有据可依时,该片段才计为有效。

所有基线的得分最高仅为 15%,即便是配备了检索增强记忆的前沿模型也是如此。若在窗口内提供神谕般的证据,GPT-5.3-Chat 可达 96%,但让它自行选择时机则降至 38%,而使用检索则降至 15%。

对于主动式助手而言,既要内容正确、时机恰当,又要克制触发,这能将准确率从不足 10% 提升至 42.4%。

来源:rohanpaul_ai · x.com