arXiv·· 13 天前AI 评分26
打破官僚主义：评估开源 LLM 在法律文档审查中的表现
Breaking Bureaucracy: Evaluating open-source LLMs for legal document review
AI 导读
研究评估了多个开源生成式 LLM 在法律自然语言推理（NLI）任务上的表现，并在 ContractNLI 基准和两个 NLI4Wills 数据集上测试，同时成功复现了 Span NLI BERT 基线。研究还分析了各模型在温度设置下的无效率和稳定性，指出法律审查场景常涉及机密数据，需要无需标注训练数据的本地模型。
来源：arXiv · arxiv.org