Hugging Face Daily Papers· Liyan Yang·· 13 天前AI 评分22
数据稀缺下 LLM 的协同个性化偏好对齐
Collaborative Personalized Preference Alignment for LLMs under Data Deficiency
AI 导读
针对用户偏好高度异质、个性化反馈稀缺导致轻量对齐器难以训练的问题,研究提出在用户间协同学习对齐器初始化以支持少样本适配。该方法需解决用户之间及用户内部多目标竞争引发的梯度冲突,从而获得有效的初始化。
来源:Hugging Face Daily Papers · huggingface.co