arXiv cs.CL· Syed Rifat Raiyan, Md. Tariquzzaman, Md Farhan Ishmam, Tenghao Huang·· 2 天前AI 评分29
LLM 能否打乱顺序讲故事？非线性叙事生成语料库与基准发布
Can LLMs Tell Stories Out of Order? A Corpus and Benchmark for Nonlinear Narrative Generation
AI 导读
研究者发布包含 83 部已出版作品的基准，用于衡量语言模型能否讲述非线性故事，并为每部作品标注事件的时间顺序与叙述顺序，以及涵盖因果依赖、角色知识和悬念设置的故事图。
正文 · AI 翻译
摘要：每个故事都有两种顺序：事件发生的顺序和事件被讲述的顺序。当两者不一致时，故事就是非线性的。我们提出了一个包含 83 部已发表作品的基准，用于衡量语言模型能否讲述非线性故事。对于每部作品，我们以两种顺序标注一个事件列表，并附上一个故事图，包含因果依赖、角色知识以及讲述所提出和解决的问题。给定按时间顺序排列的事件，所有 19 个模型平均而言比已发表作品更按时间顺序讲述它们；当要求特定结构时，它们约有一半时间落在人类范围内。然后，我们使用自动评判器和 71 名人类读者，比较模型在不同条件下对同一事件所讲述的故事。两者都更偏好模型默认写出的按时间顺序的故事，而非按要求写出的非线性故事，读者在 81% 的明确判断中发现后者更难理解。读者也更偏好根据故事图写出的故事，而非受限于已发表讲述顺序的故事（72% 的明确判断），这一差异评判器并未检测到。我们的结果表明，遵循重新排列故事顺序的指令，尚不等同于出色地打乱顺序讲述故事。
| 评论： | 审稿中，36 页，13 幅图，15 张表。代码和数据：此 https URL。项目页面：此 https URL |
| 主题： | 计算与语言（cs.CL）；人工智能（cs.AI） |
| 引用为： | arXiv:2610.21468 [cs.CL] |
| （或 arXiv:2610.21468v1 [cs.CL] 用于此版本） | |
| https://doi.org/10.48550/arXiv.2610.21468 arXiv 颁发的 DOI 通过 DataCite（待注册） |
提交历史
发件人：Syed Rifat Raiyan [查看电子邮件]
[v1]
2026 年 10 月 15 日星期四 08:13:12 UTC（904 KB）
来源：arXiv cs.CL · arxiv.org