LLM2D
关键迭代去噪:应用于图的离散生成模型
Critical Iterative Denoising: A Discrete Generative Model Applied to Graphs
作者: Yoann Boget, Alexandros Kalousis
发布日期: 3/28/2025
arXiv ID: oai:arXiv.org:2503.21592v1

摘要

arXiv:2503.21592v1 声明类型: cross 摘要: 离散扩散和流动匹配模型在生成离散结构(包括图)方面取得了显著进展。然而,这些模型在去噪过程中的时间依赖性导致了反向过程中错误的累积和传播。这个问题,在掩码扩散中尤为明显,在序列建模中是已知的限制,正如我们所演示的那样,它也影响图的离散扩散模型。 为了解决这个问题,我们提出了一种名为迭代去噪的新框架,通过假设时间上的条件独立性来简化离散扩散并绕过该问题。此外,我们通过引入一个评论家(Critic)增强了我们的模型,该评论家在生成时根据特定实例下的数据分布似然性选择保留或篡改元素。我们实证评估表明,所提出的方法在图生成任务中显著优于现有的离散扩散基准方法。