DigitalOcean 推出 AI 智能体调试测试工具
先了解这件事
2026年10月12日,DigitalOcean 公开预览了面向 AI 智能体的调试与测试工具 Signals、Simulations 和 Insights,同时以私有预览形式推出 Agent Data Services(可按需申请)。这些工具旨在帮助团队定位首个受影响的用户,并用该对话测试修复效果。模拟可在与生产环境相同的 agent 设置和工具上运行,并提供 mock 工具来模拟有成本的操作。该预览版支持 Claude Code、Codex 和 OpenCode agent,在 DigitalOcean 的测试中,不到一分钟就端到端回放了 10 个生产场景,每个修复都由人工审查并批准或拒绝。同日,DAIR.AI 的 Elvis Saravia 在 X 上阐释理念,称 agent 的生产 trace 是最好的评测数据,因为最关键的失败只在生产环境出现且很少进入测试集;Signals 会标记用户受挫或工具调用失败的会话,一键将其转为评测用例,再通过 Simulations 在真实 harness 上回放验证修复效果后才发布。10月13日,Rohan Paul 进一步说明 Signals 用低成本规则监控所有实时会话,识别用户重复提问、要求转人工、工具循环重试等人类困扰信号,Simulations 再用假想用户在修复后的 agent 上重放这些会话检查整段对话是否正常。
报道时间线
- DigitalOcean 发布 Signals 与 Simulations 工具检测静默失败的 Agent 会话
DigitalOcean 推出新工具 Signals 和 Simulations,用于标记静默失败的 Agent 会话,并在发布前针对修复进行重放验证。Signals 用低成本规则监控所有实时会话,识别用户重复提问、要求转人工、工具循环重试等人类困扰信号;随后 Simulations 用假想用户在修复后的 Agent 上重放这些会话,检查整段对话是否正常。
- DigitalOcean 推出 AI 智能体调试与测试工具
DigitalOcean 公开预览 Signals、Simulations 和 Insights,私有预览 Agent Data Services,帮助团队定位首个受影响用户并用该对话测试修复效果。
- DigitalOcean 推出 Agent 预览测试
模拟可在与生产环境相同的 agent 设置和工具上运行,并提供 mock 工具来模拟有成本的操作。 该预览版支持 Claude Code、Codex 和 OpenCode agent,在 DigitalOcean 的测试中,不到一分钟就端到端回放了 10 个生产场景。 每个修复都由人工审查并批准或拒绝。Agent Data Services 可按需申请。 试用一下 👀 digitalocean.com/data-learni…
- DigitalOcean Signals 可将生产 trace 一键转为评测并回放验证
作者提出 agent 的生产 trace 是最好的评测数据,因为最关键的失败只在生产环境出现且很少进入测试集。DigitalOcean 的 Signals 会标记用户受挫或工具调用失败的会话,一键将其转为评测用例,再通过 Simulations 在 agent 的真实 harness 上回放验证修复效果,之后才发布。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。