研究者发布伊博文化基准CAB-Igbo并评估模型

Blessing Ngozi Uzor 等作者提出并发布伊博文化基准 CAB-Igbo，用于检验语言模型对伊博文化的掌握程度。该基准取材于伊博本土文化资料，经母语者核验，覆盖六个领域。 研究者用多项选择准确率和人工评估测试多款模型，人工评估包括 Epistemic Fidelity、Representational Richness、Linguistic Quality、Pragmatic Proficiency 四项。报道称，结果显示模型的语言流利程度与文化知识之间存在脱节。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。