热点事件持续更新

成本感知弃权用于LLM工单分类的离线评估

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Sachin Gupta 提交论文，提出把“成本感知弃权”作为离线、成本条件下的就绪度评估方法：先在校准数据上按显式成本选定路由策略，再在留出测试集上冻结评估。在 47,837 条工单、八类语料的公开数据集上，TF-IDF 加逻辑回归以校准选出的 0.60 阈值将测试成本从 0.763 降至 0.472（相对降幅 38.1%），错误路由从 15.3% 降至 3.5%。作者称结论仅适用于该数据集、提示设计、模型端点和示例成本，该工作只是评估框架，并非新的弃权算法或通用部署认证。

AI 根据报道生成 · 2 小时前更新

最新进展10月23日 12:00

面向 LLM IT 工单分类的成本感知弃权评估框架

报道时间线

沿着报道，了解事件的不同侧面。

10月23日

12:00
arXiv cs.CL
面向 LLM IT 工单分类的成本感知弃权评估框架
研究提出成本感知弃权作为离线、成本条件下的就绪度评估方法：在校准数据上按显式成本选定路由策略，再在留出测试集上冻结评估。在 47,837 条工单、八类语料的公开数据集上，TF-IDF 加逻辑回归以校准选出的 0.60 阈值将测试成本从 0.763 降至 0.472（相对降幅 38.1%），错误路由从 15.3% 降至 3.5%。

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。