摘要
arXiv:2504.13042v2 通知类型: replace-cross
摘要: 在本文中,我们解决了模糊视频超分辨率(BVSR)任务,目标是从低分辨率(LR)和模糊输入中生成高分辨率(HR)视频。当前的BVSR方法往往无法在高分辨率下恢复清晰细节,导致由于去模糊所需的信息不足以及LR帧中缺乏高频细节而出现明显的伪影和抖动。为了解决这些挑战,我们引入了事件信号到BVSR,并提出了一种新颖的事件增强网络,Ev-DeblurVSR。为了有效地融合帧和事件中的信息进行特征去模糊,我们引入了一种相互特征去模糊模块,该模块利用帧内事件的运动信息去模糊帧特征,同时利用帧中的全局场景上下文增强事件特征。此外,为了增强时间一致性,我们提出了一种混合变形对齐模块,在变形对齐过程中充分利用帧间事件和光流中的互补运动信息,以提高运动估计。广泛的评估结果表明,Ev-DeblurVSR在合成和现实世界数据集上都建立了新的最新性能。值得注意的是,在现实数据上,我们的方法比最近的最好BVSR基线FMA-Net在准确度上高出2.59 dB,速度快7.28倍。代码: https://github.com/DachunKai/Ev-DeblurVSR。