摘要
文本到图像扩散模型存在生成过时、受版权保护、不正确和有偏见内容的风险。虽然之前的方法在小范围内缓解了这些问题,但在更大规模的现实世界场景中同时处理这些问题至关重要。我们提出了一种两阶段方法,即在扩散模型中编辑海量概念(EMCID)。第一阶段对每个单独的概念进行内存优化,使用来自文本对齐损失和扩散噪声预测损失的双重自蒸馏。第二阶段通过多层闭式模型编辑进行海量概念编辑。我们进一步提出了一个综合基准,称为 ImageNet 概念编辑基准 (ICEB),用于评估 T2I 模型的海量概念编辑,包括两个子任务,即自由格式提示、海量概念类别和广泛的评估指标。在我们提出的基准和之前的基准上进行的大量实验表明,EMCID 在编辑多达 1000 个概念方面具有优越的可扩展性,为在现实世界应用中快速调整和重新部署 T2I 扩散模型提供了一种实用方法。