研究：AI合规应按失败率分布衡量

John deVadoss 提交的论文提出，基于用途的 AI 监管应把部署合规性定义为在声明上下文分布下的失败率，而不是模型基准分数，并围绕部署方、审计方与执法点之间的策略博弈给出机制与命题。论文称，对声明混合分布的适当评分惩罚可将最优响应部署方的超额失败限制在 O(λ^{-1/2})；基于实时流量的承诺-揭示审计天然无偏；α-investing 可在边际假认证保证下维持长期认证覆盖。 上述主张由五项预注册合成研究验证，研究未评估任何语言模型或生产系统。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。