跳到正文
热点事件持续更新

研究者推出尼日利亚事实基准NaijaFacts

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Zainab Afolabi等作者提出尼日利亚事实与统计问题基准NaijaFacts,题目由尼日利亚母语者撰写、以官方统计数据为依据,每道题均有英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语五个版本。 在八个前沿模型及尼日利亚适配模型上的测试显示,知识效应占主导:用英语查询美英问题时准确率为49–50%,查询尼日利亚问题时仅20%。语言效应较小,且随语言的网络代表性变化,例如在尼日利亚问题上从英语换成约鲁巴语,准确率下降9分。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.CL
    NaijaFacts:区分尼日利亚事实问题中的语言效应与知识效应

    研究者推出 NaijaFacts 基准,用尼日利亚母语者撰写、基于官方统计的事实与统计问题,提供英语、尼日利亚皮钦语、约鲁巴语、伊博语和豪萨语五个版本。在八个前沿及尼日利亚适配模型上,知识效应占主导:美英问题英语查询准确率 49–50%,尼日利亚仅 20%;语言效应较小且随网络代表性变化,英语到约鲁巴语在尼日利亚问题上降 9 分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。