跳到正文
热点事件持续更新

研究:开放书评分主要衡量LoRA阅读行为

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Martino M. L. Pulici等作者发表论文称,在Llama-3.1-8B-Instruct上为150篇Wikipedia文章各训练一个LoRA适配器后发现,开卷分数主要衡量所有适配器共有的阅读行为。用另一文档训练的随机适配器可复现专家适配器相对基座模型82%的开卷优势,但在不提供原文的cloze探针上仅复现2%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. arXiv cs.CL
    研究揭示文档级 LoRA 适配器的开卷分数主要衡量阅读行为

    在 Llama-3.1-8B-Instruct 上为 150 篇 Wikipedia 文章各训练一个 LoRA 适配器后发现,开卷分数主要衡量所有适配器共有的阅读行为:用另一文档训练的随机适配器可复现专家适配器相对基座模型 82% 的开卷优势,但在不提供原文的 cloze 探针上仅复现 2%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。