AlphaIdeaBench：资源约束下的研究想法生成基准

研究团队提出并发布 AlphaIdeaBench，用于在明确资源约束下评测自动研究想法生成。该基准包含 100 个想法生成任务，其中 50 个来自 workshop 征稿、50 个来自综述提出的开放问题；每个任务都配有明确的资源预算和统一的提案 schema，由 LLM 评审按有效性、新颖性、可行性等共 12 个维度打分。 团队称，发布任务、评分标准和分数，是为了推动未来在约束条件下开展标准化、可复现的研究想法生成智能体评测。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。