《先知特工:从规范理解中合成场景》
为评估使用外部工具的 AI 代理,需构建反映从业者工具组合与多轮对话迭代的真实测试场景。人工构建此类场景依赖深厚领域知识、难以跨工具生态扩展,且产生的静态基准无法追踪演进的 API。研究观察到,工具规格(包含函数名、自然语言描述及类型化参数模式)已编码足够的语义信息,足以在不进行人工筛选或实时工具执行的情况下合成真实评估场景。Agent Seer 利用这一发现,通过理解规范来综合场景。
EVENT DOSSIER
苹果公司机器学习研究团队于 2026 年 8 月 28 日发布名为"Agent Seer"的新成果。该成果旨在通过规范理解来合成多种场景。
为评估使用外部工具的 AI 代理,需构建反映从业者工具组合与多轮对话迭代的真实测试场景。人工构建此类场景依赖深厚领域知识、难以跨工具生态扩展,且产生的静态基准无法追踪演进的 API。研究观察到,工具规格(包含函数名、自然语言描述及类型化参数模式)已编码足够的语义信息,足以在不进行人工筛选或实时工具执行的情况下合成真实评估场景。Agent Seer 利用这一发现,通过理解规范来综合场景。