研究者提出衡量真实与模拟用户行为差距的方法

Shuhaib Mehri 等研究者提出一种衡量真实用户与模拟用户行为分布差距的方法：从对话中提取用户行为表征，经聚类量化为离散分布后计算散度指标，并通过人类研究和消融实验验证。 用该方法首次系统评测 24 个基于 LLM 的用户模拟器在编程与写作任务上的表现，发现它们与真实用户存在较大分布差距，差距随模型族、规模和行文维度而变化。研究者称，将行为互补的模拟器组合使用，整体分布比单一模拟器更接近真实用户。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。