摘要
arXiv:2504.01521v1 公告类型:交叉
摘要:近期在扩散模型方面的进展彻底革新了生成模型。然而,这些模型优越并生动的输出往往伴随着显著的模型扩展和增加的计算需求。因此,基于现成模型构建个性化的扩散模型已成为一种吸引人的替代方案。本文我们提出了一个针对条件生成转移预训练模型的新视角。从这个视角出发,我们提出了 *领域指导*,这是一种简单的转移方法,利用预训练的知识来引导采样过程向目标领域靠拢。领域指导的公式与高级的分类器自由引导类似,这有助于更好的领域对齐和更高质量的生成。我们提供了关于领域指导机制的实证和理论分析。我们的实验结果表明,领域指导在各种转移基准上的表现十分显著,与标准微调相比,在FID上提高了19.6%,在FD$_\text{DINOv2}$上提高了23.4%。值得注意的是,现有的微调模型可以无缝地集成领域指导,以利用这些好处,无需额外的训练。