跳到正文
热点事件持续更新

SocialArena:大模型社交智能评测基准发布

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

Zongqi Wang 等作者提出并发布 SocialArena,一个用于系统定义和评估大语言模型社会智能的基准。该基准从角色扮演能力、心理状态推理和行为推理三个维度构建统一的三层框架,并采用带显式角色思考的角色扮演对话范式进行评测。 作者称,该工作还提出 U-TRIMF 框架,用于合成覆盖广泛社会情境的数据,并投入 13.24 万美元招募训练标注员,通过人工标注的竞技场式协议收集偏好标签与自然语言评语。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. arXiv cs.AI
    SocialArena:评估大语言模型的社会智能

    SocialArena 是一个系统定义并评估大语言模型社会智能的基准,从角色扮演能力、心理状态推理和行为推理三个维度构建统一的三层框架,并采用带显式角色思考的角色扮演对话范式进行评测。该工作还提出 U-TRIMF 框架合成覆盖广泛的社会情境,并投入 $132.4K 招募训练标注员,采用人工标注的竞技场式协议收集偏好标签与自然语言评语。

本事件热度走势

可比范围当前
7
可比范围峰值
810月31日 22:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。