跳到正文
arXiv·· 11 天前AI 评分24

RAG-PIBench:面向可信 RAG 系统提示注入检测的泄漏感知基准

RAG-PIBench: A Leakage-Aware Benchmark for Prompt-Injection Detection in Trustworthy RAG Systems

AI 导读

RAG-PIBench 是一个面向 RAG 提示注入检测的基准,包含 4,876 条上下文样本,划分为冻结的训练、验证与受保护测试集,并采用泄漏感知构建流程与严格评测协议。研究对比了关键词、语义参考、TF-IDF 与 Transformer 检测器,其中 DistilBERT 在受保护测试集上表现最佳,F1 达 0.896,PR-AUC 达 0.968。

来源:arXiv · arxiv.org