研究提出以人为中心的可视化理解评测协议

Arnav Verma 等研究者提出一套以人为中心的评估协议，让视觉语言模型与人类回答同一组可视化理解题目，直接比较两者的作答模式。 该协议应用于 8 个视觉语言模型和 6 项测评，其中 5 项是人类可视化素养测试，1 项专为模型设计。结果显示，模型平均表现低于人类，即使放宽标准，差距依然存在。模型与人类在题目相对表现上有所相关，但所有模型的错误模式都与人类可靠地不同。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。