跳到正文
热点事件持续更新

隐式论证检测模型F1停滞,新评估指标捕捉标注分歧

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

Martial Pastor 与 Nelleke Oostdijk 提交的论文研究争议政治话语中省略三段论(隐式论证)的检测与评估。在疫苗接种与移民推文数据集上(每条由五名标注者标注),所有微调模型无论数据规模、附加特征或标签类型,F1 均停滞在 0.67 左右。 研究提出将预测结果与标注者投票的完整分布进行对比的评估指标,并给出一个直接预测该分布的模型,称其在不损失 F1 的前提下更好地捕捉标注分歧。论文同时指出,模型和话语解析器都依赖显式论证结构,难以识别链接隐含、需读者自行推断的论证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. arXiv cs.CL
    争议政治话语中省略三段论检测的解释差异与话语结构

    针对疫苗接种与移民推文(每条由五名标注者标注),所有微调模型无论数据规模、附加特征或标签类型,F1 均停滞在 0.67 左右。研究提出将预测结果与标注者投票的完整分布进行对比的评估指标,并给出一个直接预测该分布的模型,在不损失 F1 的前提下更好地捕捉标注分歧。模型和话语解析器都依赖显式论证结构,难以识别链接隐含、需读者自行推断的论证。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。