LLM2D
Conceptwm:一种概念保护的扩散模型水印
Conceptwm: A Diffusion Model Watermark for Concept Protection
作者: Liangqi Lei, Keke Gai, Jing Yu, Liehuang Zhu, Qi Wu
发布日期: 4/15/2025
arXiv ID: oai:arXiv.org:2411.11688v2

摘要

arXiv:2411.11688v2 名称类型: replace-cross 摘要:扩散模型的个性化技术能够在生成特定概念的同时,也对版权保护和非法使用提出了挑战。模型水印化是一种有效的方法,可以防止以主题驱动或风格驱动的方式生成图像的未经授权使用,保护概念版权。然而,在概念导向的保护目标下,目前的水印方案通常会在所有图像上添加水印,而不是根据特定概念进行精细化的应用。此外,扩散模型的个性化技术很容易移除水印。现有的水印方法难以通过少量特定概念的图像实现细粒度的水印嵌入,并通过个性化微调防止水印的移除。因此,我们提出了一种新颖的概念导向水印框架,该框架无缝地将不可感知的水印嵌入到扩散模型的概念中。我们引入了保忠实性潜空间水印生成(FLW)以基于图像特性和潜空间生成水印,并引入了对抗水印调制模块以防止通过个性化微调进行“越狱”操作。为了提高U-Net在有限样本下学习水印模式的效率,我们提出了高效的概念导向水印微调,该方法交替优化模型参数,以进行水印嵌入和概念学习。我们进行了广泛的实验和消融研究来验证我们的框架。我们的代码可在https://anonymous.4open.science/r/Conceptwm-4EB3/获取。