arXiv cs.AI· Niran Nataraj, Maina Sogabe, Masamichi Yamashita, Norihiko Ito, Kenji Kawashima·· 10 小时前AI 评分29
TransGHOST：眼科显微手术中器械遮挡区域的实时无合成重建
TransGHOST: Real-Time, Synthesis-Free Reconstruction of Instrument-Occluded Regions in Ophthalmic Microsurgery
AI 导读
TransGHOST 提出一种因果参考引导的重建流程，其非生成式安全模式可实时运行，每个恢复像素值均由仅拟合可见区域的几何变换对已记录帧重采样得到，并提供逐像素置信度与来源标记，无法支持的像素标记为弃权。
正文 · AI 翻译
摘要：眼科显微手术中的术中场景感知受到器械遮挡的限制：当器械进入高倍率视野时，它会同时遮挡外科医生以及处理视频的机器人辅助系统感知组件对组织的观察。生成式修复可以移除遮挡物，但会用合成内容替换缺失的图像内容，这在视觉溯源很重要时并不适用。许多视频修复器还依赖未来帧，无法在线运行。我们提出 TransGHOST，一种因果参考引导的重建流程，其非生成式安全模式可实时运行。每个恢复值都通过仅拟合可见区域的几何变换对已记录帧进行重采样获得。系统提供逐像素置信度和溯源信息，并将不支持的像素标记为弃权。我们在一个新的犬白内障手术兽医临床语料库上评估 TransGHOST，该语料库具有像素级器械和解剖标签。仅对遮挡区域评分，并验证每个评分目标与提供给系统的参考不同。安全模式在 51.7 ms 中位延迟和 85.5 ms 第 95 百分位延迟下达到 31.89 dB 掩码 PSNR 和 0.915 掩码 SSIM。在预先声明的留出队列上，使用未纳入分割训练的器械抠图，它达到 29.83 dB 掩码 PSNR，而在验证集上的匹配掩码评估显示其比 LaMa 高出 3.45 dB。当候选参考本身可能被遮挡时，区域感知参考选择比最近使用策略将掩码 PSNR 提高 3.60 dB。参考时效分析进一步界定了 TransGHOST 所针对的短暂、重复遮挡的操作区间。
| 评论： | 21 页，10 幅图，11 张表 |
| 主题： | 图像与视频处理 (eess.IV)；人工智能 (cs.AI)；计算机视觉与模式识别 (cs.CV)；机器人学 (cs.RO) |
| 引用为： | arXiv:2611.13971 [eess.IV] |
| （或 arXiv:2611.13971v1 [eess.IV] 用于此版本） | |
| https://doi.org/10.48550/arXiv.2611.13971 由 DataCite 颁发的 arXiv DOI（待注册） |
提交历史
来自：Niran Nataraj [查看电子邮件]
[v1]
2026 年 11 月 10 日星期二 12:08:36 UTC（10,356 KB）
来源：arXiv cs.AI · arxiv.org