跳到正文
热点事件持续更新

MedJev:笔记本可跑的医学零样本模型

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Simon A. Lee 等作者发布论文,评估开源 System One 模型 MedJev 在十项医学基准上的零样本表现。该模型可在笔记本本地运行,在 MedQA、USMLE、NEJM 上准确率分别为 72.5%、75.4%、80.1%,接近已发表的 GPT-4 表现,置信度校准良好(ECE 0.028 至 0.063)。 作者还提出一种两参数重校准方法,用 50 至 200 个标注样本将预测适配到本地患者人群,称可将 ECE 降至 0.007。评估覆盖医学知识、诊断及基于 MIMIC IV 和 MIMIC IV ED 的患者层面预测,代码与评估工具已公开。

AI 根据报道生成 · 32 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv cs.CL
    MedJev:评估医学中的零样本 System One 决策模型

    开源 System One 模型 MedJev 可在笔记本本地运行,在 MedQA、USMLE、NEJM 上分别取得 72.5%、75.4%、80.1% 的准确率,接近已发表的 GPT-4 表现,置信度校准良好(ECE 0.028 至 0.063)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。