arXiv cs.CL· Arzu Burcu G\"uven, Anna Rogers, Leonie Weissweiler, Joakim Nivre, Rob van der Goot·· 6 天前AI 评分20
BLiMPPI：覆盖 33 种语言的极性词语言最小对基准
BLiMPPI: Benchmark of Linguistic Minimal Pairs for Polarity Items
AI 导读
研究者推出 BLiMPPI，一个覆盖 33 种语言、超过 12,000 组 NPI 最小对的多语言评测套件，通过从 Universal Dependencies 树库中发现极性词（NPI）、标注其允准环境并扰动生成最小对构建而成。
正文 · AI 翻译
摘要：否定极性项（NPIs），如“anymore”和“ever”，仅在特定环境中合乎语法，主要是在否定语境中。由于其语法性同时取决于句法和语义，它们在理论语言学中有着丰富的多语言文献，然而关于语言模型中 NPI 的研究几乎完全局限于英语。我们提出了 BLiMPPI，一个涵盖 33 种语言、超过 12,000 个 NPI 最小对立对的多语言评估套件，其构建流程为：在通用依存（UD）树库中发现 NPI，标注其允准环境，并将其扰动为最小对立对。在评估 12 个多语言模型和 2 个单语言模型以及 n-gram 基线后，我们发现多语言模型在低资源语言以及无法通过 n-gram 解决的对立对上表现最为吃力。我们进一步考察了 NPI 类型学、语系、允准变异性和 NPI 与允准词距离的影响。数据：此 https URL
| 主题： | 计算与语言（cs.CL） |
| 引用为： | arXiv:2610.13607 [cs.CL] |
| （或 arXiv:2610.13607v1 [cs.CL] 用于此版本） | |
| https://doi.org/10.48550/arXiv.2610.13607 由 DataCite 颁发的 arXiv DOI（待注册） |
提交历史
来自：Arzu Burcu Güven [查看电子邮件]
[v1]
2026年10月9日星期五 13:55:00 UTC（286 KB）
来源：arXiv cs.CL · arxiv.org