LLM2D
Home
Arxiv
返回列表
自回归扩散模型的判别器引导
Discriminator Guidance for Autoregressive Diffusion Models
发布日期:
9/24/2024
arXiv ID:
oai:arXiv.org:2310.15817v2
摘要
我们在自回归扩散模型的背景下引入了判别器引导。使用判别器来引导扩散过程之前已用于连续扩散模型,而在这项工作中,我们推导了在离散情况下将判别器与预训练生成模型结合使用的方法。首先,我们展示了使用最优判别器将修正预训练模型并实现从基础数据分布中精确采样。其次,考虑到使用次优判别器的现实情况,我们推导出一种顺序蒙特卡罗算法,该算法在生成过程中迭代地考虑判别器的预测。我们在生成分子图的任务上测试了这些方法,并展示了判别器如何在生成性能上优于仅使用预训练模型。
查看原文
下载 PDF