LLM非线性叙事基准:模型难以按指令讲好非顺叙故事
发生了什么
据arXiv cs.CL论文《Can LLMs Tell Stories Out of Order? A Corpus and Benchmark for Nonlinear Narrative Generation》报道,研究发布包含83部出版作品的非线性叙事基准,衡量语言模型能否讲述非线性故事。给定按时间顺序排列的事件,所有19个模型平均比原作更倾向于按时间顺序叙述;当要求特定结构时,它们仅在约一半时间内处于人类范围内。对比显示,读者默认更喜欢模型写的顺叙故事而非按要求写的非线性故事(81%的决定性判断中认为更难跟随)。读者也更喜欢基于故事图写的故事而非受限于原作讲述顺序的故事(72%的决定性判断),且自动化裁判未能检测到这一差异。结果表明遵循指令重排故事尚不等于能讲好非线性故事。
- 作品数量
- 83
- 测试模型数
- 19
- 读者偏好顺叙比例
- 81%
- 读者偏好故事图比例
- 72%
报道与来源
1 篇发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。
来源关系与证据边界
按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。
- 一手材料1 个发布入口