研究：LLM评审对候选人性别敏感

Danial Amin 等作者发布的研究称，LLM-as-a-Judge 无法保持中立，候选人和评估者的性别都会影响其判断。研究用 8 个模型对 NVIDIA Nemotron-Personas 数据集的 240 份合成职业叙述做城市议会投票评测，共产生 30,720 次判断。 结果显示，候选人性别被明确标注时，投赞成票的概率比性别未标注时高 1.05 至 1.73 个百分点；评估者性别中，只有被指派为非二元性别时出现显著上升，为 1.26 个百分点。上述数值为研究给出的统计结果。

AI 根据报道生成 · 48 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。