RubricAtlas从专家报告挖掘类型级评分标准
热点事件持续更新
RubricAtlas从专家报告挖掘类型级评分标准
1 篇报道1 个报道来源12 小时前更新
先了解这件事
AI 综述
Delin Wang等作者提出RubricAtlas框架，从3,079份中文金融研究报告挖掘出覆盖99种研究类型的类型级评分标准，用于评估深度研究智能体的分析完整性。 实验发现，单份报告只覆盖其所属类型约一半的分析问题，选取不同报告的要求会改变评估分数和智能体排名。在十个智能体上，两条评审流水线达到κ=0.71的检查点一致性和Kendall τ=0.87的排名一致性。
AI 根据报道生成 · 3 小时前更新
最新进展10月28日 12:00
RubricAtlas：从专家报告中挖掘类型级评分标准，评估深度研究智能体报道时间线
沿着报道，了解事件的不同侧面。
10月28日
- arXiv cs.AIRubricAtlas：从专家报告中挖掘类型级评分标准，评估深度研究智能体
RubricAtlas 从 3,079 份中文金融研究报告构建覆盖 99 种研究类型的类型级评分标准，用于评估深度研究智能体的分析完整性。实验显示单份报告仅覆盖其类型约一半的分析问题，选取不同报告的要求会改变评估分数与智能体排名；在十个智能体上，两条评审流水线达到 κ = 0.71 的检查点一致性和 Kendall τ = 0.87 的排名一致性。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。