跳到正文
热点事件持续更新

研究者发布INCARBench评测LLM配置VASP

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

研究者提出INCARBench基准,用于评测大语言模型在VASP输入配置上的生成与修复能力。对19个模型配置的评估显示,前沿模型间能力差异显著:语义与策略准确率虽高,但任务关键正确率明显偏低。 错误集中在DFT+U、磁性与关联材料等物理耦合设置。修复评测还表明,纠正错误配置与保留已有效配置是两种不同能力。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. arXiv cs.AI
    INCARBench:评估大语言模型配置 VASP INCAR 的基准

    研究者提出 INCARBench,用于评测大语言模型在 VASP 输入配置上的生成与修复能力。对 19 个模型配置的评估显示,前沿模型间能力差异显著,语义与策略准确率虽高,但任务关键正确率明显偏低。错误集中在 DFT+U、磁性与关联材料等物理耦合设置,修复评测还表明纠正错误配置与保留已有效配置是两种不同能力。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。