LLM2D
基于评分生成模型的重要抽样
Importance Sampling via Score-based Generative Models
作者: Heasung Kim, Taekyun Lee, Hyeji Kim, Gustavo de Veciana
发布日期: 2/10/2025
arXiv ID: oai:arXiv.org:2502.04646v1

摘要

arXiv:2502.04646v1 类型: cross 摘要: 重要性采样是一种涉及从与重要性权重函数和基础概率密度函数(PDF)的乘积成比例的概率密度函数中采样的技术,它是一种强大的方法,应用于减少方差、有偏或定制化采样、数据增强等。受评分生成模型(SGMs)日益可用的启发,我们提出了一种完全无需训练的重要性采样框架,仅依赖于一种SGM作为基础PDF。我们的一项关键技术创新是将重要性采样过程视为一个反向扩散过程,该过程以基础PDF的评分函数和指定的重要性权重函数的形式表示——两者都可以轻松获取,从而完全不需要额外的训练。我们进行了全面的分析,证明了该方法在多种数据集和任务上的可扩展性和有效性,包括使用神经重要性权重函数进行工业和自然图像的重要性采样。我们的方法的无需训练特性在实际应用场景中特别具有吸引力,因为在这些场景中,单个基础分布涵盖了多个有偏采样任务,每个任务需要不同的重要性权重函数。据我们所知,这是我们第一次提出能够实现这一点的重要性采样框架。