跳到正文
arXiv cs.AI· Jincheng Gao, Wei Ding, Shuo Sun·· 3 天前AI 评分31

SemTree:面向可检查、可修复规则决策的 Judge-Aware 语义决策树

SemTree: Judge-Aware Semantic Decision Trees for Inspectable and Repairable Rule Decisions

AI 导读

SemTree 将规则决策表示为语义决策树,每个节点是带明确 Yes/No/Unknown 标准的自然语言问题,由可插拔语义 judge 回答,分支结构按该 judge 的实际回答编译。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:内容审核、广告合规和资格检查等规则决策结合了若干条件、豁免和缺失信息情形,而只有知道是哪一条件不满足,才能修复错误。我们提出 SemTree,一个将规则决策表示为语义决策树的框架:每个节点是一个自然语言问题,带有明确的 Yes/No/Unknown 判定标准,一个可插拔的语义评判器回答该问题,分支结构根据该评判器实际给出的答案进行编译。所执行的路径就是每个决策背后的推理过程,因此错误可在其发生处修复:审核者修正单个节点并重放规则,修正后的节点成为评判器的训练标签,而一个使用工具的 LLM 编辑器在观察执行结果的同时修订问题和子树。在全部 8,276 个 ShARC 测试用例上,由托管评判器执行的树达到 67.70% 的准确率,每个用例 2.99 个问题,与向同一评判器询问最终标签(68.23%)相当;一个早先为不同评判器编译的树在由该评判器执行时得分为 47.87%,而基于该评判器对 12 个问题初始池的答案新编译的树已达到 64.39%。节点级修复将 BANKING77 准确率从 82.04% 提升至 86.16%,一个显式豁免节点将某中国电商审核条款的假阳性从 24 降至 5,而经过训练的编辑器将编辑后树的开发准确率从 64.47% 提升至 73.35%。
学科: 机器学习(cs.LG);人工智能(cs.AI);计算与语言(cs.CL)
引用为: arXiv:2610.13999 [cs.LG]
  (或本版本的 arXiv:2610.13999v1 [cs.LG])
  https://doi.org/10.48550/arXiv.2610.13999

由 DataCite 颁发的 arXiv DOI(待注册)

提交历史

来自:Jincheng Gao [查看邮箱]
[v1] 2026年9月27日星期日 04:16:36 UTC(2,376 KB)

来源:arXiv cs.AI · arxiv.org