跳到正文
热点事件持续更新

多语言数据集PerspectivesQA与ROOTS框架发布

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Wiem Ben Rim等研究者构建了覆盖18种语言、经人工核验的争议话题数据集PerspectivesQA,并提出ROOTS框架,用于刻画语言、观点与表述框架的多样性。 研究者用该框架评估8个开源与闭源模型后发现:LLM在英语中倾向模糊表态,在低资源语言中却给出明确立场;大模型的跨语言世界观更一致,小模型更易被左右;所有模型都对输入表层微小变化高度敏感。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv cs.CL
    俄语、葡萄牙语、德语提问同一争议话题:LLM 观点多样性跨语言画像研究

    研究者构建了覆盖 18 种语言、经人工核验的多语言争议话题数据集 PerspectivesQA,并提出 ROOTS 框架刻画语言、观点与表述框架的多样性。对 8 个开源与闭源模型的评估显示,LLM 在英语中倾向模糊表态,在低资源语言中却给出明确立场;大模型跨语言世界观更一致,小模型更易被左右,且所有模型都对输入表层微小变化高度敏感。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。