跳到正文
热点事件持续更新

MM-ReportBench:多模态报告生成基准发布

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

Teng Lin、Nan Tang 等人提出多模态报告生成评测基准 MM-ReportBench,覆盖 185 张真实表格、386 个任务,每项任务配有人工校验的参考报告。 该基准采用双评审框架,对 20 个 SOTA 模型评测显示最高分仅 68.9,38.5% 的报告存在数值幻觉,真正新颖的洞察稀少。消融实验还显示,单评审打分比双评审高 8–12 分。

AI 根据报道生成 · 5 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月18日
  1. arXiv cs.CL
    MM-ReportBench:面向表格多模态报告生成的综合基准

    MM-ReportBench 是覆盖 185 张真实表格、386 个任务的多模态报告生成评测基准,每项任务配有人工校验的参考报告。其双评审框架显示,20 个 SOTA 模型中最高分仅 68.9,38.5% 的报告存在数值幻觉,真正新颖的洞察稀少。消融实验表明单评审打分比双评审高 8-12 分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。