跳到正文
热点事件持续更新

研究者提出 AlienBench 评估模型输出新颖性

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Jonas Oppenlaender 等研究者提出 AlienBench 基准,把认知心理学中的结构化想象任务用于语言模型:让模型描述外星生物,再由三个 LLM 评委提取十项生物特征,判断这些特征是否偏离地球动物的常规,并给出 0–10 分。 该基准用于衡量语言模型输出在结构上的新颖性,评分由 LLM 评委完成,而非人工评审。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月9日
  1. arXiv cs.CL
    AlienBench:评估语言模型输出结构新颖性的基准

    研究者提出 AlienBench,将认知心理学的结构化想象任务适配到语言模型:模型描述外星生物,由三个 LLM 评委提取十项生物特征并判断是否偏离地球动物常规,得分 0-10。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。