跳到正文
热点事件持续更新

研究者发布法国区域知识评测基准CARTE

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Sarah Almeida Carneiro 等作者发布 CARTE 基准,用 3,132 道多选题覆盖法国 13 个大区、12 个主题领域,评估大语言模型辨别法国境内区域差异化知识的能力。 该基准还包含聚焦法语地区语言差异的子集 CARTE-LV,题目经人工审核、LLM-as-a-judge、模型难度校准和二次人工审核四阶段验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. arXiv cs.CL
    CARTE:评估大语言模型对法国各地区知识掌握程度的基准

    研究者推出 CARTE 基准,用 3,132 道多选题覆盖法国 13 个大区、12 个主题领域,评估大语言模型对法国境内区域差异化知识的辨别能力。该基准还包含聚焦法语地区语言差异的子集 CARTE-LV,题目经人工审核、LLM-as-a-judge、模型难度校准和二次人工审核四阶段验证。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。