arXiv研究指Agentic Data Science存在失效风险

发生了什么

据arXiv cs.AI论文指出，现有的代理式数据科学（agentic DS）评估往往忽视方法论原则，导致数据泄露和不适当验证等根本性失败。研究通过对220个数据科学任务的大规模分析发现，大多数代理解决方案至少包含一种失败模式，且数据泄露与预测性能呈正相关。定性分析显示，相比专家，DS代理缺乏解决问题的创造力和领域知识，建议将原则性的失败模式分析纳入评估体系。