孟加拉语习语测试暴露决策模型字面吸引偏差

Adib Sakhawat 与 Syed Rifat Raiyan 发布论文，审计编码器打分器、解码器打分器和闭源 API 三类非生成式决策模型在孟加拉语习语上的表现。研究发现，把习语自身的字面释义放入选项列表会吸引所有模型，这类错误占各模型剩余孟加拉语错误的 65% 至 96%。 审计完全通过干预模型输入进行，所用习语经专家标注，每个习语同时带有标准比喻释义和标准字面释义。

AI 根据报道生成 · 59 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。