跳到正文
热点事件持续更新

研究:中译英受控任务测LLM词汇知识冲突

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

研究者Dongxu Wu、Sara Court和Micha Elsner构建了一个受控的普通话到英语翻译任务,把熟悉的源词赋予新含义,用来评估九款大语言模型在提示词所给词义与模型自身词汇知识冲突时如何取舍。 结果显示,低频源词以及支持所给含义的句子上下文会提高模型对上下文知识(CK)的依赖;九款模型中有七款即使被明确要求忽略所给含义,仍偏向使用CK。模型家族内较大的模型更倾向使用CK。 后续实验显示,情态弱化可降低CK依赖,重复效应取决于提示词布局,推理的影响因模型而异。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月9日
  1. arXiv cs.CL
    研究:LLM 翻译中如何处理词汇知识冲突?九款模型评测

    研究者构建受控的普通话到英语翻译任务,将熟悉源词赋予新含义,系统评估词频、句子上下文和提示词框架对九款 LLM 输出的影响。低频源词及支持所给含义的句子上下文会提高模型对上下文知识(CK)的依赖,九款模型中有七款即使被明确要求忽略所给含义仍偏向 CK。模型家族内较大模型更倾向使用 CK,后续实验显示情态弱化可降低 CK 依赖,重复效应取决于提示词布局,推理的影响因模型而异。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。