arXiv·· 12 天前AI 评分31
ChartBmkAgent：以 Harness 治理的多智能体从稀疏错误分类规范构建 Chart QA 基准
ChartBmkAgent: Harness-Governed Multi-Agent Construction of Chart QA Benchmarks from Sparse Error-Taxonomy Specifications
AI 导读
ChartBmkAgent 通过 Harness 治理的多智能体流程，从稀疏的错误分类规范出发自动构建 Chart QA 基准，以缩短基准开发周期并按需将已识别的能力缺口转化为定向样本。该方法针对现有多模态大模型基准开发滞后、且现有自动化构建方法常将目标指引与构建过程割裂的问题，利用信息丰富的图表来探测耦合的感知与推理能力。
来源：arXiv · arxiv.org