智迹闻AuraTracer
EN

EVENT DOSSIER

一致性破坏与共形预测

2026-09-07 12:00 科学 🔥 42.2 事件热度
1家信源
1天持续发酵
42.2事件热度
1个提及
摘要由 AI 生成

arXiv:2609.0445v1 提出“分数机制偏移”现象,指出当大型语言模型(LLM)在同伴一致给出错误答案时,其评分机制会发生漂移,导致置信证书失效。该研究发现在多智能体系统中,这种偏移使覆盖度从校准后的 90% 降至 74%(标准 alpha = 0.10)。在开放权重的多选择问答任务中,攻击者针对低置信度项可将该子组的覆盖度从 87% 压低至 47%,而监控的平均值仍保持较高。此外,决策层失效导致本应升级的系统反而对攻击者的错误答案产生足够信心并执行行动。现有标准顺从修复方法无法解决此问题,因为问题分布未变,而是模型的评分行为发生了改变。

相关事件RELATED EVENTS
关键实体KEY ENTITIES
Conformity

信号强度SIGNALS

关键词热度
  • Conformity1

全部报道(1)SOURCES

A arXiv cs.LG en 2026-09-07 12:00

Conformity Breaks Conformal Prediction

arXiv:2609.04445v1 提出“分数机制偏移”现象,即 LLM 在同伴一致给出错误答案时,其评分机制发生漂移导致置信证书失效。该研究指出,这种偏移会破坏多智能体系统中的顺从预测(Conformal Prediction),使覆盖度从校准后的 90% 降至 74%(标准 alpha = 0.10)。在开放权重的多选择问答任务中,攻击者针对低置信度项可将该子组的覆盖度从 87% 压低至 47%,而监控的平均值仍保持较高。此外,决策层失效导致本应升级的系统反而对攻击者的错误答案产生足够信心并执行行动。现有标准顺从修复方法无法解决此问题,因为问题分布未变,而是模型的评分行为发生了改变。