跳到正文
热点事件持续更新

研究比较Jev类模型与LLM医疗决策可靠性

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Yanrui Du等作者发表对比研究,在15个医学数据集、8,742个实例上统一评估Jev、Jev类模型与LLM的系统一决策可靠性。结果显示,Jev在文本驱动任务上可与领先模型匹敌,但在数值驱动任务上表现较弱,暴露出能力边界。 面对问题格式变化,Jev决策一致性较强、准确率波动小;StartLux-27B一致性相当;D3-27B总体准确率更高,且平均决策反转率更低。

AI 根据报道生成 · 50 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月19日
  1. arXiv cs.CL
    Jev 类系统一决策模型在医学场景有多可靠?与 LLM 的对比研究

    一项对比研究在 15 个医学数据集、8,742 个实例上评估了 Jev、Jev-like 模型与 LLM 的系统一决策可靠性。Jev 在文本驱动任务上可与领先模型匹敌,但在数值驱动任务上表现较弱,暴露出能力边界;面对问题格式变化,Jev 决策一致性较强、准确率波动小,StartLux-27B 一致性相当,D3-27B 总体准确率更高且平均决策反转率更低。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。