跳到正文
arXiv·· 15 天前AI 评分22

类型化决策模型的候选覆盖基准测试:Laya 与 Jev 在 AG News、DBpedia、Emotion、TREC 上的评估

Benchmarking Candidate Coverage in Typed Decision Models

AI 导读

研究提出配对候选覆盖基准协议,并在 AG News、DBpedia、Emotion、TREC 上对 Laya 与 Jev 做初步评估:300 条校准文本与 589 条测试文本共产生每个模型 23,932 条预测。存在/缺失配对保持普通候选数量一致,用于检验模型能否识别参考答案缺失、避免拒绝有效候选。

来源:arXiv · arxiv.org