arXiv cs.CL· Samuel Harvan, Jaroslav Kop\v{c}an, Marek \v{S}uppa, Andrej Findor·· 10 小时前AI 评分18
The Brittle Compass:斯洛伐克移民媒体话语中 LLM 提示词敏感性研究
The Brittle Compass: Navigating LLM Prompt Sensitivity in Slovak Migration Media Discourse
AI 导读
一项针对斯洛伐克语移民媒体话语的案例研究考察了主题相关性、地理相关性分类与移民来源/目的地地点词提取任务,发现斯洛伐克语母语提示词仅带来随任务而异的有限提升。大模型对提示词变化的鲁棒性显著强于小模型,且指令(系统或任务)是最关键的提示词组成部分,重要性超过示例部分。
正文 · AI 翻译
摘要:在本研究中,我们呈现了一个案例研究,围绕斯洛伐克语(一种低资源语言)中的移民主题探索了多项任务,例如主题相关性和地理相关性分类,以及移民来源地/目的地位置术语抽取。我们的结果表明,母语(斯洛伐克语)提示词带来了适度且因任务而异的增益,而大型模型相比小型模型对提示词变化表现出显著的鲁棒性。分析表明,指令(系统或任务)成为最关键的提示词组成部分,其重要性超过示例部分,且任务特定的性能收益比整体语言效应更为明显。
| 评论: | 14 页,16 幅图。发表于第一届低资源语言自然语言处理进展研讨会(LowResNLP 2025)论文集,该研讨会与 RANLP 2025 联合举办,保加利亚瓦尔纳 |
| 主题: | 计算与语言(cs.CL) |
| 引用为: | arXiv:2611.01219 [cs.CL] |
| (或 arXiv:2611.01219v1 [cs.CL] 为此版本) | |
| https://doi.org/10.48550/arXiv.2611.01219 由 DataCite 颁发的 arXiv DOI(待注册) |
|
| 期刊 参考: | 第一届低资源语言自然语言处理进展研讨会论文集,INCOMA Ltd.,2025,第 88-101 页 |
| 相关 DOI: | https://doi.org/10.26615/978-954-452-100-4-010
链接到相关资源的 DOI |
提交历史
来自:Jaroslav Kopčan [查看邮箱]
[v1]
2026 年 10 月 31 日星期六 19:41:05 UTC(447 KB)
来源:arXiv cs.CL · arxiv.org