跳到正文
热点事件观察中

DeepMind与Artificial Analysis发布MKA基准

4 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

Google DeepMind 与 Artificial Analysis 联合推出 MKA(Multimodal Knowledge Agent)基准,用于评测智能体在建筑图纸、工程示意图、临床扫描等视觉复杂文件上完成知识工作、产出幻灯片、表格、PDF 等交付物的能力。Artificial Analysis 称,基准含 10 个行业、83 种职业的 200 个私有真实任务,每项任务在其开源框架 Stirrup 中运行,可用代码执行、网页搜索、网页抓取和图像查看工具(最多 250 轮),由 GPT-6 Luna(medium)作为评审对交付物评分;每项任务配约 70 项是非判断检查项,事实准确性占 75%、视觉设计占 25%。 双方称现有评测未覆盖这类超出文本范围的工作。200 项正式任务保持私有以防泄漏进训练数据,另在 Hugging Face 公开 10 项供开发者了解测试格式;MKA 已通过 Artificial Analysis 开放,开发者可用该平台评估自己的模型。Artificial Analysis 方面称,Gemini 4 Carbon 在 MKA 上排名第 2,单任务平均成本比榜首模型低 6 倍。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. RadarAI
    谷歌联合 Artificial Analysis 推出 MKA 多模态知识智能体基准,Gemini 4 Carbon 质量第二、成本为第一名六分之一

    谷歌联合 Artificial Analysis 推出多模态知识智能体基准测试 MKA,用于评估 AI 智能体处理视觉复杂文件、完成现实知识工作任务的能力。该测试含 200 项私有任务,覆盖 10 个行业 83 种职业,每项任务配约 70 项是非判断检查项,事实准确性占 75%、视觉设计占 25%。

  2. RadarAI
    Google DeepMind 与 Artificial Analysis 联合发布 MKA 智能体知识工作基准

    Google DeepMind 的 Philipp Schmid 宣布与 Artificial Analysis 联合推出 MKA(Multimodal Knowledge Agent)基准,用于评测智能体在视觉复杂文件上的知识工作。

  3. RadarAI
    Artificial Analysis 与 Google DeepMind 合作引入 MKA 基准

    Artificial Analysis 与 Google DeepMind 合作,将面向视觉复杂任务的 MKA(Multimodal Knowledge Agent)基准引入 Artificial Analysis。该基准考察智能体处理蓝图交叉比对、科学图表阅读等超出文本范围的专业工作,现有评测未覆盖此类能力。Gemini 4 Carbon 在该基准排名第 2,单任务平均成本比榜首模型低 6 倍。

  4. RadarAI
    Artificial Analysis 与 Google DeepMind 发布 MKA 多模态知识工作基准

    Artificial Analysis 与 Google DeepMind 合作上线 Multimodal Knowledge Agent(MKA)评测,用 200 个覆盖 10 个行业的私有真实视觉任务考察智能体处理建筑图纸、工程示意图和临床扫描并产出幻灯片、表格、PDF 等交付物的能力。

本事件热度走势

可比范围当前
4
可比范围峰值
1011月11日 07:00
近 24 小时变化
-51%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。