跳到正文
热点事件持续更新

研究测试法律AI在缺失权威时是否弃答

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

一项研究把 CaseHOLD 数据集扩展出“无正确选项”的弃权条件,将 5,314 道题中的 1,670 道替换掉正确判决,用来测试模型在缺失法律依据时会不会弃答。 结果显示,四个 System One 决策模型和六个生成式 LLM 都难以做到弃答:没有正确选项时,生成式 LLM 仍有 38% 至 86% 强行作出选择,最谨慎的决策模型强行选择率为 30%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. arXiv cs.CY
    该提交还是弃权?System One 决策模型、LLM 与缺失的法律依据

    研究将 CaseHOLD 扩展出弃权条件(5,314 题中 1,670 题替换正确判决),对比四个 System One 决策模型与六个生成式 LLM:无正确选项时生成式 LLM 仍有 38-86% 强行选择,最谨慎的决策模型为 30%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。