研究提出国际象棋解释评估指标与BinProp方法

Ori Press等作者提出一种以棋类引擎评估为基础的自动指标，用于衡量语言模型对国际象棋走法的解释质量。他们据此发现，当前最先进模型表现意外地差，常依赖表层棋盘观察，而非可迁移的棋类概念。 为此，作者提出免训练的BinProp方法，让同一批模型自行发现可复用的棋类概念并用自然语言解释走法。作者称，所有被测模型的平均得分接近提升至直接提示的3倍；该方法无需额外调优，即可在围棋、跳棋和将棋中发现有用概念。

AI 根据报道生成 · 55 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。