跳到正文
arXiv cs.AI· Jing Wang, Yitong Yang, Hao Dou, Yaomin Wu, Shuting He, Tingfei Shen, Jia Wu, Jiaqi Li, Yinglin Wang·· 11 小时前AI 评分31

TriGeoBench:包含图形与 TikZ 的多模态数学几何基准

TriGeoBench: A Multimodal Mathematical Geometry Benchmark with Figures and TikZ

AI 导读

TriGeoBench 是一个面向几何的多模态基准,包含 7,000 个问答对和 12,235 个带 TikZ 代码的几何图形,覆盖平面几何、立体几何、解析几何、函数与向量几何。每个实例由 {问答对、图像、TikZ} 三元组构成,问答对以 LaTeX 存储,图像为 RGB 图形,TikZ 保留几何拓扑与符号标注。对代表性开源与闭源 MLLM 的评测显示,模型在细粒度结构和图文对齐上仍存在持续挑战。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:多模态大语言模型展现出强大的视觉-语言能力,但其以几何为中心的推理仍未被充分理解。现有的数学基准通常依赖栅格化图形,且覆盖的几何知识领域和作答形式有限,难以评估模型是基于几何结构进行推理,还是利用表面的视觉模式。我们提出 TriGeoBench,一个以几何为中心的多模态基准,构建自中国初高中数学考试。TriGeoBench 包含 7,000 个问答对和 12,235 个带 TikZ 代码的几何图形,涵盖平面几何、立体几何、解析几何、函数和向量几何,并包含多种作答形式。每个实例构成一个 {问答对, 图像, TikZ} 三元组:问答对以 LaTeX 存储,图像为 RGB 图形,TikZ 保留几何拓扑、符号标注和关系结构。我们通过图像到 TikZ 和多模态推理探测评估了具有代表性的开源和闭源 MLLM。结果揭示了持续存在的细粒度结构和图文对齐挑战。使用人工整理的参考 TikZ 的 Oracle 实验表明,准确的可执行表示提供了互补的几何线索;它们并不评估端到端转换流程。TriGeoBench 为结构感知的数学推理提供了一个测试平台。
评论: 18 页,7 幅图,5 张表,包括附录。前四位作者贡献相同
主题: 人工智能(cs.AI);数据库(cs.DB)
引用为: arXiv:2610.27626 [cs.AI]
  (或 arXiv:2610.27626v1 [cs.AI] 用于此版本)
  https://doi.org/10.48550/arXiv.2610.27626

由 DataCite 颁发的 arXiv DOI(待注册)

提交历史

来自:Jing Wang [查看邮箱]
[v1] 2026 年 10 月 20 日星期二 04:52:30 UTC(4,918 KB)

来源:arXiv cs.AI · arxiv.org