跳到正文
热点事件持续更新

TouchéWorld 提出相机与手部统一控制的视频世界模型

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

研究团队发布 TouchéWorld,一个把由手势驱动的交互并入相机控制视频世界模型的框架:输入初始图像和场景描述提示词,输出以时间对齐的相机与手部控制为条件的视频。 为训练该框架,团队从异构第一人称视频中通过标注补全、一致性过滤和时间对齐构建联合相机-手部数据,并用参数高效适配结合手部骨架空间条件与数值手部运动特征。团队同时提出 TouchéBench,用于评估手部运动跟随、相机-手部协调、在线交互和物体响应。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.AI
    TouchéWorld:在生成式世界中实现统一的相机与手部在线探索

    TouchéWorld 是一个将手势驱动交互集成到相机控制视频世界模型中的框架,可根据初始图像和场景描述提示词,生成以时间对齐的相机与手部控制为条件的视频。该框架通过标注补全、一致性过滤和时间对齐,从异构第一人称视频构建联合相机-手部训练数据,并借助参数高效适配结合手部骨架空间条件与数值手部运动特征。研究团队还提出 TouchéBench,用于评估手部运动跟随、相机-手部协调、在线交互和物体响应。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。