跳到正文
arXiv cs.AI· Gayoung Lee, Junho Kim, Jin-Hwa Kim, Junmo Kim·· 10 小时前AI 评分29

视觉中的皮格马利翁效应:用图像到黏土转换重建反光物体几何

Pygmalion Effect in Vision: Image-to-Clay Translation for Reflective Geometry Reconstruction

AI 导读

研究者提出“视觉中的皮格马利翁效应”框架,通过图像到黏土转换把反光物体“雕塑”成类黏土形态,以解耦外观与几何。该框架采用双分支设计:基于 BRDF 的反光分支与黏土引导分支共享同一高斯几何但走独立渲染路径,后者由合成黏土图像监督,提供无反射的几何引导。在合成与真实数据集上,几何与光度指标均获一致提升,论文已被 NeurIPS 2026 接收。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:由于在视角相关的反射下外观与几何相互纠缠,理解反射一直是三维重建中长期存在的挑战。在本工作中,我们提出了视觉中的皮格马利翁效应(Pygmalion Effect in Vision),这是一个新颖的框架,通过图像到黏土的转换,隐喻性地将反射物体“雕塑”成类似黏土的形式。随后,我们引入了一种双分支设计,其中基于 BRDF 的反射分支和黏土引导分支共享相同的高斯几何,但通过独立的渲染路径运行。黏土引导分支由合成的黏土图像监督,提供无反射的几何引导,补充 BRDF 分支的光度监督。在合成数据集和真实数据集上的实验表明,几何和光度指标均得到持续改善。除技术收益之外,我们的框架还揭示出,通过去除光泽来观察、将辐射度转换为中性,可以作为反射物体几何学习的一种强大归纳偏置。
评论: 已被 NeurIPS 2026 接收
主题: 计算机视觉与模式识别(cs.CV);人工智能(cs.AI);图形学(cs.GR)
引用为: arXiv:2511.21098 [cs.CV]
  (或使用 arXiv:2511.21098v2 [cs.CV] 查看此版本)
  https://doi.org/10.48550/arXiv.2511.21098

由 DataCite 颁发的 arXiv DOI

提交历史

来自:Gayoung Lee [查看电子邮件]
[v1] 2025年11月26日星期三 06:34:58 UTC(34,380 KB)
[v2] 2026年11月10日星期二 07:28:17 UTC(16,326 KB)

来源:arXiv cs.AI · arxiv.org