LLM2D
跨合成数据和实际基准领域仿射变换的代理模型迁移学习
Transfer Learning of Surrogate Models via Domain Affine Transformation Across Synthetic and Real-World Benchmarks
作者: Shuaiqun Pan, Diederick Vermetten, Manuel L\'opez-Ib\'a\~nez, Thomas B\"ack, Hao Wang
发布日期: 2/11/2025
arXiv ID: oai:arXiv.org:2501.14012v2

摘要

arXiv:2501.14012v2 Announce Type: replace-cross 摘要:代理模型经常被用作有效替代昂贵的实际过程执行的手段。然而,构建高质量的代理模型通常需要大量的数据获取。这一问题的解决方案是在任务之间存在某些不变性的情况下,将预训练的代理模型转移到新的任务上。本文关注将非可微代理模型(例如,随机森林)从源函数传递到目标函数,假设它们的领域通过未知的仿射变换相关,仅通过在目标上评估少量的转移数据点来进行。先前的研究试图通过调整仿射变换来在转移数据上最小化经验损失,来解决这一挑战,尤其是在不同的可微模型(例如,高斯过程回归)中。在这篇论文中,我们将先前的工作扩展到随机森林模型,并在广泛使用的标准测试集(BBOB测试床)和四个真实世界的转移学习问题上评估其有效性。结果突显了所提出方法在减少构建复杂现实场景的代理模型所需的数据需求和计算成本方面的显著实用优势。