LLM2D
WeatherGS:通过高斯点绘制在恶劣天气条件下的3D场景重建
WeatherGS: 3D Scene Reconstruction in Adverse Weather Conditions via Gaussian Splatting
作者: Chenghao Qian, Yuhu Guo, Wenjing Li, Gustav Markkula
发布日期: 2/13/2025
arXiv ID: oai:arXiv.org:2412.18862v3

摘要

arXiv:2412.18862v3 通告类型: 替换交叉 摘要:3D 高斯散布(3DGS)在3D 场景重建方面获得了广泛的关注,但在复杂户外环境中,尤其是恶劣天气下,仍然存在局限性。这是因为3DGS 将由恶劣天气引起的伪影视为场景的一部分,并直接进行重建,极大地降低了重建场景的清晰度。为了解决这一挑战,我们提出了一种基于3DGS 的框架,能够在不同天气条件下从多视图图像中重建清晰的场景。具体来说,我们明确将多天气伪影分为密集粒子和镜头遮挡,这两种伪影具有非常不同的特征,其中前者是由空中雪花和雨滴引起,后者是由镜头上的降水引起的。基于这一点,我们提出了一种从密集到稀疏预处理策略,首先通过大气效应过滤器(AEF)顺序移除密集粒子,然后使用镜头效应检测器(LED)提取相对稀疏的遮挡掩模。最后,我们通过处理过的图像和生成的掩模训练一组3D 高斯分布,用于排除遮挡区域,并通过高斯散布精确恢复底层清晰场景。我们建立了一个多样和具有挑战性的基准,以促进在复杂天气情景下的3D重建评估。在这一基准上的大量实验表明,我们的WeatherGS 在各种天气情景下始终能够产生高质量、清晰的场景,优于现有的最先进的方法。项目页面:https://jumponthemoon.github.io/weather-gs。