新模型联合生成视频与任意骨架3D运动

Noam Rotstein 等作者提出一种模型，可为任意给定的骨骼绑定直接联合生成视频与 3D 运动，并给出将运动对齐到场景的相机。 据作者描述，该模型将支持任意骨架的 3D 运动模型与预训练视频模型通过少量 cross-attention 层连接，先仅用运动数据学习骨架运动，再借助关节在视频帧中的定位恢复相机。上述效果来自作者在论文中的表述。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。