LLM2D
AC-LoRA: 自动组件LoRA个性化艺术风格图像生成
AC-LoRA: Auto Component LoRA for Personalized Artistic Style Image Generation
作者: Zhipu Cui, Andong Tian, Zhi Ying, Jialiang Lu
发布日期: 4/4/2025
arXiv ID: oai:arXiv.org:2504.02231v1

摘要

arXiv:2504.02231v1 声明类型: cross 摘要: 个性化图像生成允许用户保留所提供的一小组图像的风格或主题,以便进一步的图像生成。随着大型文本到图像模型的发展,已经开发出了许多有效微调这些模型以实现个性化的方法,例如低秩适应(LoRA)。然而,基于LoRA的方法通常会面临调整秩参数以达到满意结果的挑战。为了解决这一挑战,提出了AutoComponent-LoRA(AC-LoRA),它可以自动分离LoRA矩阵的信号分量和噪声分量,以实现快速高效的个性化艺术风格图像生成。该方法基于奇异值分解(SVD)和动态启发式更新训练中的超参数。该方法在克服模型欠拟合或过拟合问题方面的表现优于现有方法得到了验证。使用FID、CLIP、DINO和ImageReward进行的结果验证,平均提高了9%。