复现研究未能验证ChaosNLI单调性边界

Haram Choi 等发表预注册复现研究，在 SNLI 和 MultiNLI 开发集上检验 ChaosNLI 提出的单调性边界，结果计划预测失败：七组对比的 Cliff's delta 全部为正，非向上单调性条目的标签一致性略高而非略低，唯一显著的验证性对比方向与预期相反，且所有效应均远低于 0.10 的最小关注效应量。 该研究称，其检验对象是 ChaosNLI 样本来源的未筛选人群，即把原研究的边界结论放到未筛选人群中复现。

AI 根据报道生成 · 40 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。