rohanpaul_ai· @rohanpaul_ai · X·· 3 小时前AI 评分
Salesforce论文:跨方智能体互不主动核验声明,团队继承最弱智能体的错误
Salesforce一篇新论文发现,代表不同方行动的智能体从不主动核验彼此的声明,导致团队继承最弱智能体的错误。研究在488个场景中运行了超过2500次智能体会话,使用Claude Code、Codex和Cursor在独立沙箱中运行,并从轨迹中归纳出20种失败模式。
Salesforce 的新论文发现,代表不同方行事的智能体从不会主动验证彼此的说法,因此团队会继承其最弱智能体的错误。
智能体越来越多地与代表其他人或公司的智能体协作,每个智能体都有各自的私有文件、工具和目标。现有的故障研究都假设只有一个编排器或共享工作区。
他们在 488 个场景中运行了超过 2,500 次智能体对智能体的会话,使用 Claude Code、Codex 和 Cursor 分别在独立沙箱中运行,并从追踪记录中整理出 20 种故障模式。
没有智能体重新获取文档来验证同伴的事实性主张,智能体主要在提示词要求时才联系同伴。在一次服务级纠纷中,一笔 24,000 美元的和解通过了全部 10 项结果检查,但供应商智能体泄露了机密细节。
如果你的智能体会与外部智能体对话,请在协议中内置检查机制,并根据每个智能体所服务的对象而非团队整体结果来对其评分。
来源:rohanpaul_ai · x.com