跳到正文
热点事件持续更新

研究者发布碎片文档重建基准 ShredBench

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Zichun Guo 等作者提出碎片文档重建基准 ShredBench,用自动化流水线从 Markdown 直接生成碎片化文档,用于评估多模态大模型的文档重建能力。 该基准覆盖英文、中文、代码、表格四种场景,设 8、12、16 三种碎片粒度,并可接入最新文本源以避免训练数据污染。 对 SOTA 多模态大模型的评测显示,文档完整时方法有效,但碎片化后重建难度骤增,NED 随碎片数量增加而急剧下降。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv cs.CL
    ShredBench:评估多模态 LLM 在文档重建中的语义推理能力

    研究者提出 ShredBench 基准,用自动化流水线从 Markdown 直接生成碎片化文档,评估多模态 LLM 的文档重建能力。该基准覆盖英文、中文、代码、表格四种场景,设 8、12、16 三种碎片粒度,可灵活接入最新文本源以避免训练数据污染。对 SOTA 多模态 LLM 的评测显示,文档完整时方法有效,但碎片化后重建难度骤增,NED 随碎片数量增加而急剧下降。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。