跳到正文
arXiv·· 13 天前AI 评分31

可验证计数是否依赖措辞:指令遵循中的措辞鲁棒性审计

When Verifiable Counts Depend on Wording: Auditing Wording Robustness in Instruction Following

AI 导读

研究提出 WISE 匹配评测套件与报告协议,在精确词数、关键词恰好出现一次、8–12 词区间三类约束下检验措辞变化对指令遵循得分的影响。在 100 个匹配任务、来自 7 家厂商的最多 13 个模型上,仅改变措辞就导致合规率出现显著波动。

来源:arXiv · arxiv.org