Scale发布HSS基准测试:AI视觉推理仅达人类一半
发生了什么
据scale.com · 技术动态报道,Scale与Elorian合作发布直觉视觉推理基准测试HSS,包含522项开放任务。结果显示,人类参与者准确率达93.1%,而最强模型GPT-6-astra仅为53.6%,中位数模型为30.9%。测试涵盖时间因果、物理空间逻辑和社会理解等领域。研究发现,增加推理努力无法缩小差距,甚至可能在某些子领域降低准确率,表明模型失败在于“看见和推断”,而非推理本身。
- 人类准确率
- 93.1%
- 最强模型准确率
- 53.6%
报道与来源
1 篇发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。
- scale.com · 技术动态一手材料
Introducing Humanity's Sixth Sense: Measuring Intuitive Visual Reasoning
来源关系与证据边界
按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。
- 一手材料1 个发布入口