arXiv发布AI Consilium临床基准测试
发生了什么
据arXiv论文,研究团队开发了基于NEJM-MedQA的AI Consilium基准测试,用于评估LLM临床多学科第二意见能力。该基准使用300个已确诊病例,其中110个用于医生参考评级和Judge校准,190个用于保留集评估。研究对比了8个单模型管道在自由形式和结构化临床推理条件下的表现。结果显示,GPT-5.6-Sol在所有评估组件中领先,且以最少轮次达成共识。结构化报告在管理、问题优先级、事实依据和推理连贯性方面得分更高。
- 评估病例数
- 300
- 生成报告总数
- 3,040
报道与来源
1 篇发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。
来源关系与证据边界
按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。
- 一手材料1 个发布入口