摘要
隐式神经表示(INRs)最近作为一种强大的方法引起了人们的关注,它使用多层感知器(MLP)来连续表示图像、视频和 3D 形状等信号。然而,众所周知,MLP 存在低频偏差,这限制了它们准确捕获高频细节的能力。这种局限性通常通过整合高频输入嵌入或专门的激活层来解决。在这项工作中,我们证明了这些嵌入和激活通常配置了在平均情况下表现良好的超参数,但对于所考虑的特定输入信号来说,它们并非最佳,因此需要进行代价高昂的网格搜索以确定最佳设置。我们的关键观察是,未经训练的模型输出的初始频率谱与该模型在给定目标信号上的最终性能密切相关。利用这一见解,我们提出了频率偏移(或 FreSh),这是一种方法,它选择嵌入超参数以使模型初始输出的频率谱与目标信号的频率谱对齐。我们证明了这种简单的初始化技术提高了各种神经表示方法和任务的性能,实现了与广泛的超参数扫描相当的结果,但与使用默认超参数训练单个模型相比,计算开销仅略有增加。