摘要
arXiv:2503.24210v1 Announce Type: cross
摘要:从模糊的多视角图像中重建清晰的3D表示是计算机视觉中长期存在的问题。近期的工作试图通过利用事件相机来增强运动模糊的高质量新视角合成,从而受益于高动态范围和微秒级的时间分辨率。然而,它们往往在恢复不准确的颜色或丢失精细细节方面达到次最优的视觉效果。在本文中,我们提出了一种新颖的方法DiET-GS,其融合了扩散先验和事件流辅助的运动去模糊3DGS框架。我们的框架有效利用了无模糊事件流和扩散先验在两阶段训练策略中的优势。具体而言,我们引入了新的框架,利用事件双积分来约束3DGS,从而实现准确的颜色和清晰的细节。此外,我们提出了一种简单的方法,利用扩散先验进一步增强边缘细节。在合成和真实世界数据上的定性和定量结果表明,我们的DiET-GS能够显著提高新视角的质量,相较于现有的基线方法。我们的项目页面为https://diet-gs.github.io