LLM2D
FreSh:基于频率偏移的加速神经表征学习
FreSh: Frequency Shifting for Accelerated Neural Representation Learning
作者: Adam Kania, Marko Mihajlovic, Sergey Prokudin, Jacek Tabor, Przemys{\l}aw Spurek
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2410.05050v2

摘要

隐式神经表示(INR)最近作为一种强大的方法受到关注,它可以使用多层感知器(MLP)连续表示图像、视频和3D形状等信号。然而,众所周知,MLP 存在低频偏差,限制了其准确捕捉高频细节的能力。这种限制通常通过结合高频输入嵌入或专门的激活层来解决。在这项工作中,我们证明这些嵌入和激活通常配置的超参数平均表现良好,但在所考虑的特定输入信号方面却次优,需要代价高昂的网格搜索才能确定最佳设置。我们的关键观察是,未经训练的模型输出的初始频谱与其在给定目标信号上的最终性能密切相关。利用这一见解,我们提出了频移(FreSh)方法,该方法选择嵌入超参数以使模型初始输出的频谱与目标信号的频谱对齐。我们表明,这种简单的初始化技术提高了各种神经表示方法和任务的性能,实现了与广泛的超参数扫描相当的结果,但与使用默认超参数训练单个模型相比,计算开销仅略有增加。