研究提出RATE机器翻译评估协议与专家数据集

Dmitry Popov等作者提出RATE（Refined Assessment for Translation Evaluation）机器翻译评估协议，并据此构建了由专业语言学家对WMT24英俄翻译进行人工评估的数据集。 作者称，该协议针对MQM、ESA等现有评估方法的局限：标注者水平不一、分类过繁、严重度粒度过粗、偏重准确率而忽视流畅度。RATE旨在让专家进行一致且丰富的标注。报道未给出该协议或数据集在实际评估中的效果数据。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。