跳到正文
热点事件持续更新

Circe:免训练LLM自评估方法提出

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Shuyi Miao等作者提出免训练的大语言模型自评估方法Circe,无需参考答案或重复采样即可判断模型回答的正确性。 该方法融合内部与外部信号:内部信号包括组件交互一致性(CIC,衡量早期层注意力更新与后期层注意力诱导FFN输出变化的方向对齐)和表示几何(RG);外部信号则将生成token的平均负对数似然转换为有界似然置信度(LC)分数。 目前该方法以预印本形式发布,报道未给出其在不同模型和任务上的实际评估效果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv cs.AI
    Circe:基于组件交互一致性的免训练 LLM 自评估方法

    Circe 是一种免训练的自评估方法,无需参考答案或重复采样,通过融合内部与外部信号判断 LLM 回答的正确性。其内部信号包括组件交互一致性(CIC,衡量早期层注意力更新与后期层注意力诱导 FFN 输出变化的方向对齐)和表示几何(RG),外部信号则将生成 token 的平均负对数似然转换为有界似然置信度(LC)分数。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。