arXiv cs.CL· Shuyuan Zheng, Yun-seo Lee, Xing Gao, Jialu Wu, Jiabao Hu, Katrina Qiyao Wang, Xinbo Lin, Qianying Liu, Chuan Xiao, Tao Huang·· 3 天前AI 评分23
LLM 如何理解法哲学？LePhilBench 诊断大语言模型的法哲学推理能力
How Do LLMs Understand Legal Philosophy? Diagnosing Legal-Philosophical Reasoning in LLMs
AI 导读
研究者提出 LePhilBench，用于评估 LLM 的法哲学推理能力，包含两项基准任务与一个数据集。其测试集收录 220 份美国最高法院判决意见，由法学教授设计 14 个法哲学标注问题，3 名受过法学训练的标注者完成全部标注，共产生 9,240 个法哲学标签。
正文 · AI 翻译
摘要：法律推理是大语言模型（LLM）完成法律判决预测等法律 AI 任务的一项基本能力。在法律实践中，这种推理受到法哲学的塑造：法官对法律本质与渊源的观点，指导着法律材料如何被解释和适用，因此依据相同成文法与判例的法官可能得出不同判决。现有研究在很大程度上忽视了 LLM 能否理解法哲学并将其应用于法律推理，我们将这一能力称为\textit{法律哲学推理}。为填补这一空白，我们提出了 LePhilBench，一个用于评估 LLM 法律哲学推理的基准，包含两项基准任务和一个数据集。这两项任务分别评估 LLM 对法哲学的理解程度，以及它们在法律推理中应用法哲学的程度。该数据集由人工精心构建。其测试集包含 220 份美国最高法院意见书。一位法学教授设计了十四个关于法哲学的问题，三位受过法学正规训练、具备法理学正式培训的标注者为每份意见书回答了全部十四个问题，共产生 9,240 个法哲学标签。LePhilBench 迈出了探索 LLM 法律哲学推理的第一步。
| 学科： | 计算与语言（cs.CL）；人工智能（cs.AI） |
| 引用格式： | arXiv:2610.19427 [cs.CL] |
| （或本版本的 arXiv:2610.19427v1 [cs.CL]） | |
| https://doi.org/10.48550/arXiv.2610.19427 由 DataCite 颁发的 arXiv DOI（待注册） |
提交历史
来自：Shuyuan Zheng [查看邮箱]
[v1]
2026年10月14日星期三 02:24:11 UTC（200 KB）
来源：arXiv cs.CL · arxiv.org