研究:LLM品牌推荐偏好源自偏好训练
热点事件持续更新
研究:LLM品牌推荐偏好源自偏好训练
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
一项覆盖102个模型、42个品牌类别的研究发现,语言模型在被要求说出跑鞋品牌时答Nike,被要求推荐时却选Brooks,命名品牌与推荐品牌在26个类别中不一致。 三条开源训练流程显示,预训练已把推荐品牌与建议绑定,监督微调基本不改变选择,而DPO让选择在三条流程中移动11至24个百分点,且偏好数据几乎不含品牌。作者Tapan Parikh等人怀疑这种偏好来自偏好训练中判定答案优劣的judge模型。
AI 根据报道生成 · 1 小时前更新
最新进展10月21日 12:00
语言模型如何学会品味:LLM 中的品牌偏好报道时间线
沿着报道,了解事件的不同侧面。
10月21日
- arXiv cs.CL语言模型如何学会品味:LLM 中的品牌偏好
研究覆盖 102 个模型和 42 个品牌类别发现,模型被要求说出跑鞋品牌时答 Nike,被要求推荐时却选 Brooks,命名品牌与推荐品牌在 26 个类别中不一致。三条开源训练流程显示,预训练已把推荐品牌与建议绑定,监督微调基本不改变选择,而 DPO 让选择在三条流程中移动 11 至 24 个百分点,且偏好数据几乎不含品牌。作者怀疑这种偏好来自偏好训练中判定答案优劣的 judge 模型。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。