实证分析:LLM Agent静态技能不一致不必然导致运行时风险
发生了什么
据arXiv cs.AI论文,研究者对575个社区和基准技能进行审计,发现1,182处手动验证的合同不一致。通过49个可执行Agent任务和三个代表性LLM的实验,量化了缺陷修复后的实际性能影响,表明静态缺陷量不能可靠反映真实世界Agent性能下降。
- 审计技能数量
- 575个
- 发现的不一致数量
- 1,182处
报道与来源
1 篇发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。
来源关系与证据边界
按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。
- 一手材料1 个发布入口