研究：静态分析检测代码库幻觉上限有限

Clarissa Miranda-Pena 等作者发表实证分析，考察静态分析工具检测和缓解代码库幻觉的能力，该研究已被 TMLR 接收。 在需要调用库的 NL-to-code 基准上，LLM 有 8.1%–40% 的回复使用了不存在的库功能。静态分析工具可检测 16%–70% 的全部错误和 14%–85% 的库幻觉，性能随模型与数据集变化；人工分析显示其理论上限为 48.5%–77%。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。