跳到正文
arXiv cs.CL· Prasanth Bathala, Anubhav Shrimal, Sukhdeep Singh Kharbanda, Pradyumna Lanka, Rohit Dhaipule·· 10 天前AI 评分22

TACTICS:面向机器翻译的 taxonomy 感知智能语料采样方法

TACTICS: Taxonomy-Aware Intelligent Corpus Sampling for Machine Translation

AI 导读

TACTICS 是一种面向机器翻译评估的语料采样方法,它从 locale 风格指南中归纳层级 taxonomy,对语料片段分类后,在固定预算下联合优化稀有类别覆盖、文档级连贯性和对全语料的分布保真度。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:大规模机器翻译(MT)系统通常是在语料库的随机样本上进行评估的,而该语料库的分布构成是其组装方式的产物。这样的样本继承的是该集合恰好包含的现象,而非系统必须处理的完整空间——涵盖规则驱动的惯例(术语、标点、货币格式)和依赖上下文的现象(语气、敬语、文档级连贯性),因此无法为评估鲁棒性提供覆盖保证。我们提出 TACTICS(Taxonomy-Aware Coverage-opTimized Intelligent Corpus Sampling,分类感知的覆盖优化智能语料采样),将覆盖重新定义为一个明确目标。TACTICS 从区域风格指南中归纳出层次化分类体系,对片段进行分类,并选择一个固定预算的子集,同时优化稀有类别的覆盖、文档级连贯性以及对完整语料的分布保真度。将 TACTICS 应用于四个翻译方向的 MT 评估,相比基于词汇和嵌入的选择方法,它提高了稀有类别的覆盖。通过针对区分系统的现象,TACTICS 让固定评估预算发挥更大作用,在存在真实质量差距时,用远少于随机采样的片段恢复真实的系统排名,而在不存在差距时绝不发出差异信号。
评论: 已被 EMNLP 2026(2026 年第十一届机器翻译会议 - WMT2026)接收
主题: 计算与语言(cs.CL);机器学习(cs.LG)
引用为: arXiv:2609.17956 [cs.CL]
  (或 arXiv:2609.17956v3 [cs.CL] 用于此版本)
  https://doi.org/10.48550/arXiv.2609.17956

arXiv 颁发的 DOI,通过 DataCite

提交历史

来自:Prasanth Bathala [查看电子邮件]
[v1] 2026年9月16日星期三 00:34:12 UTC(3,226 KB)
[v2] 2026年10月1日星期四 23:14:03 UTC(3,227 KB)
[v3] 2026年10月6日星期二 21:30:27 UTC(3,227 KB)

来源:arXiv cs.CL · arxiv.org