RadarAI· X:Larsen Cundric(自述加入 SpaceXSI,Grok Bot) (@larsencc)·· 7 小时前AI 评分38
长程智能体可靠性:99%单步成功率为何不够
AI 导读
单步成功率 99% 时,10 步任务全程无失败的概率约 90%,100 步则降至 37%;若每次失败可重试一次且失败相互独立,37% 可回升到约 99%。但重试并不简单:响应超时可能导致动作重复执行,失败也可能改变系统状态,失败之间未必独立。因此长程智能体不只是 LLM 问题,模型周围的系统同样关键。
正文 · AI 翻译
Larsen Cundric· @larsencc · X·2026-10-18 04:17· 30 分钟前AI 评分48
AI 导读
单步成功率 99% 时,10 步任务全程无失败的概率约 90%,100 步则降至 37%;若每次失败可重试一次且失败相互独立,37% 可回升到约 99%。但重试并不简单:响应超时可能导致动作重复执行,失败也可能改变系统状态,失败之间未必独立。因此长程智能体不只是 LLM 问题,模型周围的系统同样关键。
正文 · 原文
99% 的可靠性听起来很棒,但你真该算一算。
如果每个动作的成功率是 99%,一个 10 步任务全程无一次失败的概率是 90%。到 100 步时,这个概率会降到 37%。
现在给每个失败的动作一次重试机会。假设失败相互独立,那 37% 会跃升到约 99%。
这是巨大的差别。但重试并不总是那么简单。
如果一个动作成功了,但响应超时了呢?重试可能导致它被执行两次。如果失败让系统进入了不同的状态呢?失败之间很可能也不独立。
在决定下一步做什么之前,你需要知道实际发生了什么。
这就是为什么长程智能体不只是 LLM 的问题。更好的模型固然需要,但模型周围的系统同样重要!
来源:Larsen Cundric · x.com
来源:RadarAI · aihot.news