arXiv cs.CL· Hedwig Oldenhof, Laura Rosseel, Anna Wegmann, Dong Nguyen·· 9 小时前AI 评分19
人类与 LLM 对荷兰多民族语 Straattaal 的内隐与外显语言态度对比
Comparing Implicit and Explicit Language Attitudes toward the Dutch multiethnolect Straattaal in Humans and Large Language Models
AI 导读
研究用匹配设计对比人类与 LLM 对荷兰多民族语 Straattaal 的语言态度:人类在 IAT 和外显评分任务中均强烈将 Straattaal 与有移民背景者关联。
正文 · AI 翻译
摘要:尽管语言态度在人类中已被广泛研究,但大型语言模型(LLM)在多大程度上编码了语言变体与社会属性之间的类似关联,仍不清楚。当代社会语言学研究区分了源于审慎加工的显性态度和源于自动加工的隐性态度。本研究考察 LLM 是否对荷兰多民族语 Straattaal 表现出类似人类的隐性和显性语言态度,尤其是其与移民群体的关联。我们采用高度匹配的设计来评估人类和 LLM 的态度。对于人类,我们使用内隐联想测验(IAT)和显性评分任务。对于 LLM,我们使用 LLM 词语联想测验(LLM WAT)和相同的显性评分任务。人类参与者在隐性和显性层面都将 Straattaal 与有移民背景的个体强烈关联。在 LLM WAT 中,Straattaal 始终与有移民背景的个体相关联,且在更大、更新的模型中观察到更强的关联。当向 LLM 呈现与人类参与者相同的显性评分任务时,LLM 产生可比的响应模式。总体而言,研究结果表明许多 LLM 编码的语言态度与人类观察到的相似,但我们也强调了关于为研究人类态度而开发的概念和测量方法应如何在 LLM 中解释的重要问题。这凸显了将社会语言学视角和语言变异纳入 NLP 研究的相关性,以更好地识别和缓解社会与语言上嵌入的偏见。
| 主题: | 计算与语言(cs.CL) |
| 引用为: | arXiv:2611.22335 [cs.CL] |
| (或 arXiv:2611.22335v1 [cs.CL] 为此版本) | |
| https://doi.org/10.48550/arXiv.2611.22335 由 DataCite 颁发的 arXiv DOI(待注册) |
提交历史
来自:Hedwig Oldenhof [查看电子邮件]
[v1]
2026年11月17日星期二 07:36:09 UTC(115 KB)
来源:arXiv cs.CL · arxiv.org