研究质疑LLM时间推理的算术-语义二分
热点事件持续更新
研究质疑LLM时间推理的算术-语义二分
1 篇报道1 个报道来源11 小时前更新
先了解这件事
AI 综述
Auss Abbood等作者发表研究,直接检验大语言模型时间推理分为“时间算术”与“时间语义”两类的假设,结论是这一二分未获支持。按该二分微调后,增益主要是数据集特定的(+6.8至+23.1个百分点),同模态跨数据集迁移仅-3.2至+1.1个百分点。 基于认知需求的模型评估显示,定量与逻辑推理并非这些基准表现的主要驱动力,知识才是。作者据此认为,当前时间推理基准并未清晰实现算术-语义区分,更多是在奖励模型记住时间通常如何运作。
AI 根据报道生成 · 2 小时前更新
最新进展10月22日 12:00
研究质疑 LLM 时间推理的“算术-语义”二分法:知识才是主要驱动力报道时间线
沿着报道,了解事件的不同侧面。
10月22日
- arXiv cs.CL研究质疑 LLM 时间推理的“算术-语义”二分法:知识才是主要驱动力
一项研究直接检验了 LLM 时间推理分为时间算术与时间语义两类的假设,发现按此二分微调后增益主要是数据集特定的(+6.8 至 +23.1 个百分点),同模态跨数据集迁移仅 -3.2 至 +1.1 个百分点。基于认知需求的模型评估显示,定量与逻辑推理并非这些基准表现的主要驱动力,知识才是。这表明当前时间推理基准并未清晰实现算术-语义区分,更多是在奖励模型记住时间通常如何运作。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。