arXiv cs.CL· Sheza Munir, Ramaravind Kommiya Mothilal, Syed Ishtiaque Ahmed·· 6 天前AI 评分22
AXLE：用任务本身激活标注者的生活经验
Activating the Annotator: Operationalising Lived Experience in Data Annotation
AI 导读
研究者提出 AXLE，一个预标注阶段：用场景小故事引导一段轴导向对话，合成第一人称微叙事后在标注前返回给标注者。在针对移民、宗教与性别议题的模糊仇恨言论 2x2 被试间实验中（104 名标注者、30 个条目、1,040 条标注），该阶段带来更高的身份共鸣与伤害敏感度，同时提高标签熵、降低标注者间一致性，显示其呈现多元而非制造共识。
正文 · AI 翻译
摘要：视角主义 NLP 已经确立，标注者的立场会影响主观任务的标签，但该领域仍缺乏将其操作化的方法。立场通常被操作化为招募时填写的人口统计表格：一个静态属性，记录一次并被视为协变量，其假设是它所索引的知识在标注者阅读条目时处于激活状态。本文将这一假设视为一个设计问题，并追问生活经验是否可以改由任务本身来启动。我们提出 AXLE，一个预标注阶段，其中情景小故事锚定一段简短的、由轴引导的对话，该对话被合成为第一人称微叙事，并在标注开始前返回给标注者。在一项 2x2 被试间研究（104 名标注者，30 个条目，1,040 条标注）中，针对涵盖移民、宗教和性别的模糊仇恨言论，引导与更高的身份共鸣和对伤害的更高敏感度相关。它还增加了标签熵并降低了标注者间一致性：该阶段似乎揭示的是多元性而非制造共识，这使其有别于标注者培训，后者的成功标准是趋同。
| 学科： | 计算与语言（cs.CL）；计算机与社会（cs.CY）；人机交互（cs.HC） |
| 引用为： | arXiv:2610.12701 [cs.CL] |
| （或 arXiv:2610.12701v1 [cs.CL] 用于此版本） | |
| https://doi.org/10.48550/arXiv.2610.12701 arXiv 颁发的 DOI 通过 DataCite（待注册） |
提交历史
来自：Sheza Munir [查看电子邮件]
[v1]
2026年10月8日星期四 20:31:56 UTC（566 KB）
来源：arXiv cs.CL · arxiv.org