跳到正文
arXiv cs.AI· Wenjie Liao, Xiaohui Song, Liangjie Zhao, Haonan Lu·· 9 天前AI 评分23

SP-DocReader:面向精准文档 OCR 的差异感知自博弈框架

SP-DocReader: Difference-Aware Self-Play for Precise Document OCR

AI 导读

SP-DocReader 是一个针对监督微调后残余误差的 OCR 自博弈框架,仅训练 OCR 模块、冻结主干。在 Qwen3-VL-4B 上,SP-DR-3 相比 SFT-2 将 Vary-600K 字符错误率降低约 54%,DocVQA ANLS 提升 3.7 分。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:在有限的输入和训练预算下,视觉语言模型仍难以实现准确的页面转录。我们提出 SP-DocReader,一个用于光学字符识别(OCR)的自对弈框架,针对监督微调后的残余错误。阅读差异掩码通过最长公共子序列对齐参考模型与生成模型的 token,然后用其完整的条件前缀对未匹配位置进行评分。聚焦保真度损失在未匹配的真实位置添加直接的负对数似然监督。仅训练 OCR 模块,而主干保持冻结。我们推导出组合梯度,以区分相对分数优化与直接监督。与 SFT-2 相比,SP-DR-3 在两个主干上均降低了 Vary-600K 字符错误率。在 Qwen3-VL-4B 上,它将字符错误率降低约 54%,并将 DocVQA 平均归一化莱文斯坦相似度(ANLS)提高 3.7 个点。这些结果表明,将自对弈训练聚焦于监督微调后仍存在的差异具有价值。
主题: 计算机视觉与模式识别(cs.CV);人工智能(cs.AI)
引用为: arXiv:2610.11148 [cs.CV]
  (或 arXiv:2610.11148v1 [cs.CV] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.11148

arXiv 颁发的 DOI 通过 DataCite(待注册)

提交历史

来自:Wenjie Liao [查看电子邮件]
[v1] 2026年10月8日星期四 03:12:12 UTC(1,030 KB)

来源:arXiv cs.AI · arxiv.org