LLM2D
跨越合成数据和实际基准通过域仿射变换的代理模型迁移学习
Transfer Learning of Surrogate Models via Domain Affine Transformation Across Synthetic and Real-World Benchmarks
作者: Shuaiqun Pan, Diederick Vermetten, Manuel L\'opez-Ib\'a\~nez, Thomas B\"ack, Hao Wang
发布日期: 5/5/2025
arXiv ID: oai:arXiv.org:2501.14012v3

摘要

arXiv:2501.14012v3 宣告类型: 更换-交叉 摘要:代理模型经常被用作真实世界过程昂贵执行的高效替代品。然而,构建高质量的代理模型往往需要大量的数据收集。解决这一问题的一种方法是在任务之间存在某些不变性的情况下,转移预训练的代理模型到新任务。本研究集中于将非可微代理模型(例如随机森林)从源函数转移到目标函数,我们假设这些函数的定义域通过一个未知的仿射变换相关,并且仅使用在目标上评估的有限数量的转移数据点。先前的研究试图解决这一挑战,特别是对于可微模型,例如高斯过程回归,它通过调整仿射变换来最小化转移数据的实经验风险。在本文中,我们将前人的工作扩展到随机森林,并在广泛使用的黑盒优化基准(BBOB)测试库以及四个真实世界的转移学习问题上评估其效果。结果突显了所提出方法的显著实践优势,特别是在减少复杂真实世界场景中训练代理模型所需的数据和计算成本方面。