LLM2D
PersonaCraft:基于3D模型条件扩散的单参考图像多身份个性化全身图像合成
PersonaCraft: Personalized Full-Body Image Synthesis for Multiple Identities from Single References Using 3D-Model-Conditioned Diffusion
作者: Gwanghyun Kim, Suh Yoon Jeon, Seunggyu Lee, Se Young Chun
发布日期: 11/28/2024
arXiv ID: oai:arXiv.org:2411.18068v1

摘要

个性化图像生成技术已经取得显著进展,能够创建高度逼真和定制化的图像。然而,现有方法在生成多人图像时常常难以处理遮挡问题,并且无法准确地个性化全身形状。本文提出了一种名为PersonaCraft的新方法,它结合了扩散模型和3D人体建模来解决这些限制。我们的方法通过结合使用SMPLx-ControlNet进行3D感知姿态调节,有效地管理遮挡问题,并通过SMPLx拟合准确地个性化人体全身形状。此外,PersonaCraft允许用户自定义体型调整,增加了个性化体型定制的灵活性。实验结果表明,PersonaCraft在生成高质量、逼真的多人图像以及解决遮挡问题方面具有优越的性能,从而为多人个性化图像合成树立了新的标准。