跳到正文
热点事件持续更新

AWS 开源 UAEF 智能体评估框架

1 篇报道1 个报道来源56 分钟前更新

先了解这件事

AI 综述

AWS 在 awslabs/uaef GitHub 仓库以 Apache 2.0 许可证开源了通用智能体评估框架 UAEF。它通过适配器把 LangGraph、LangChain、Strands Agents、Amazon Bedrock AgentCore 和 Langfuse 的 trace 统一为 AgentTrace,再用 7 个维度共 36 项内置指标打分。 UAEF 可本地运行、部署在 HTTP 端点后,或运行在 Amazon Bedrock AgentCore 等托管运行时上;trace 可来自 Langfuse,也可以完全不采集。标准答案(ground truth)为可选项,只有将智能体回答与参考答案比对的指标才需要它;缺少标准答案时,UAEF 会自动跳过这类指标,因此部分标注的数据集和未标注的生产流量仍可评估。 部署时创建的 DynamoDB 表、S3 桶和 Amazon Cognito 用户池采用保留策略,删除堆栈后这些资源及其内容仍会保留。

AI 根据报道生成 · 44 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. AWS Machine Learning Blog
    AWS 开源 UAEF:跨框架闭环评测 AI 智能体

    AWS 发布开源框架 UAEF(Universal Agent Evaluation Framework),通过适配器把 LangGraph、LangChain、Strands Agents、Amazon Bedrock AgentCore 和 Langfuse 的 trace 统一为 AgentTrace,再用 7 个维度共 36 项内置指标打分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。