DeepMind与Artificial Analysis发布MKA基准
先了解这件事
Google DeepMind 与 Artificial Analysis 联合推出 MKA(Multimodal Knowledge Agent)基准,用于评测智能体在建筑图纸、工程示意图、临床扫描等视觉复杂文件上完成知识工作、产出幻灯片、表格、PDF 等交付物的能力。Artificial Analysis 称,基准含 10 个行业、83 种职业的 200 个私有真实任务,每项任务在其开源框架 Stirrup 中运行,可用代码执行、网页搜索、网页抓取和图像查看工具(最多 250 轮),由 GPT-6 Luna(medium)作为评审对交付物评分;每项任务配约 70 项是非判断检查项,事实准确性占 75%、视觉设计占 25%。 双方称现有评测未覆盖这类超出文本范围的工作。200 项正式任务保持私有以防泄漏进训练数据,另在 Hugging Face 公开 10 项供开发者了解测试格式;MKA 已通过 Artificial Analysis 开放,开发者可用该平台评估自己的模型。Artificial Analysis 方面称,Gemini 4 Carbon 在 MKA 上排名第 2,单任务平均成本比榜首模型低 6 倍。
AI 根据报道生成 · 1 天前更新
报道时间线
沿着报道,了解事件的不同侧面。
- RadarAI谷歌联合 Artificial Analysis 推出 MKA 多模态知识智能体基准,Gemini 4 Carbon 质量第二、成本为第一名六分之一
谷歌联合 Artificial Analysis 推出多模态知识智能体基准测试 MKA,用于评估 AI 智能体处理视觉复杂文件、完成现实知识工作任务的能力。该测试含 200 项私有任务,覆盖 10 个行业 83 种职业,每项任务配约 70 项是非判断检查项,事实准确性占 75%、视觉设计占 25%。
- RadarAIGoogle DeepMind 与 Artificial Analysis 联合发布 MKA 智能体知识工作基准
Google DeepMind 的 Philipp Schmid 宣布与 Artificial Analysis 联合推出 MKA(Multimodal Knowledge Agent)基准,用于评测智能体在视觉复杂文件上的知识工作。
- RadarAIArtificial Analysis 与 Google DeepMind 合作引入 MKA 基准
Artificial Analysis 与 Google DeepMind 合作,将面向视觉复杂任务的 MKA(Multimodal Knowledge Agent)基准引入 Artificial Analysis。该基准考察智能体处理蓝图交叉比对、科学图表阅读等超出文本范围的专业工作,现有评测未覆盖此类能力。Gemini 4 Carbon 在该基准排名第 2,单任务平均成本比榜首模型低 6 倍。
- RadarAIArtificial Analysis 与 Google DeepMind 发布 MKA 多模态知识工作基准
Artificial Analysis 与 Google DeepMind 合作上线 Multimodal Knowledge Agent(MKA)评测,用 200 个覆盖 10 个行业的私有真实视觉任务考察智能体处理建筑图纸、工程示意图和临床扫描并产出幻灯片、表格、PDF 等交付物的能力。
本事件热度走势
- 可比范围当前
- 4
- 可比范围峰值
- 1011月11日 07:00
- 近 24 小时变化
- -51%
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。