跳到正文
热点事件持续更新

UniPat AI发布湿实验预测基准SPU

4 篇报道3 个报道来源2 小时前更新

先了解这件事

AI 综述

UniPat AI 牵头发布湿实验预测基准 Science Prediction Universe(SPU),用于评测模型对真实湿实验结果的预测能力。基准包含 116 个任务、4207 个湿实验,覆盖化学、材料科学、生物和医学;100 个公开任务取自 85 篇近期论文,另有 16 个来自未发表实验的私有任务。数据集和代码已开源,100 个公开任务计划以完整的 Harbor 任务包形式发布,16 个私有任务保持私有、用于受控评测。 据量子位报道,12 款前沿模型在该基准上的平均分最高为 0.486。RadarAI 报道称,即使 Opus 5.5 也只有约一半任务超过随机水平,推理拉满、算力翻 5 倍仍无改善,显示模型距离可靠预测湿实验结果仍有较大差距。

AI 根据报道生成 · 56 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月15日
  1. RadarAI
    UniPat AI 发布 Science Prediction Universe 基准:Opus 5.5 仅约半数任务超过随机水平

    UniPat AI 推出湿实验预测基准 Science Prediction Universe(SPU),包含 116 个任务和 4207 个实验。测试中即使 Opus 5.5 也只有约一半任务超过随机水平,推理拉满、算力翻 5 倍仍无改善。结果显示模型距离可靠预测湿实验结果仍有较大差距。

  2. RadarAI
    Science Prediction Universe 基准发布:116 个任务评测 AI 科研预测能力

    Science Prediction Universe 基准发布,包含 116 个科研任务和 4207 组湿实验,覆盖化学、材料科学、生物医学四大领域。首轮评测最高分仅 0.486,显示 AI 的科研预测能力仍远低于人类水平。

11月14日
  1. 量子位
    UniPat AI 发布湿实验预测基准 SPU,12 款前沿模型平均分最高 0.486

    UniPat AI 牵头发布湿实验预测基准 SPU,包含 116 个任务、4207 个湿实验,覆盖化学、材料科学、生物和医学,公开任务取自 85 篇近期论文,另有 16 个来自未发表实验的私有任务。

  2. arXiv cs.AI
    Science Prediction Universe 基准发布:100 个公开与 16 个私有湿实验任务评测智能体预测能力

    研究团队提出 Science Prediction Universe(SPU)基准,包含化学、材料科学、生物与医学领域的 100 个公开验证任务,以及 16 个来自未发表湿实验的私有任务,要求智能体根据实验设置和候选条件按测量结果排序。

本事件热度走势

可比范围当前
20
可比范围峰值
2511月15日 01:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。