LLM2D
Home
Arxiv
返回列表
高斯过程在对数变换目标函数上训练后,期望改进的闭合形式推导
Derivation of Closed Form of Expected Improvement for Gaussian Process Trained on Log-Transformed Objective
作者:
Shuhei Watanabe
发布日期:
11/28/2024
arXiv ID:
oai:arXiv.org:2411.18095v1
摘要
预期改进 (EI) 可谓贝叶斯优化中最广泛使用的采集函数。然而,由于其对数值精度的敏感性,提升 EI 的性能往往具有挑战性。此前,Hutter 等人 (2009) 通过使用在对数变换的目标函数上训练的高斯过程解决了这个问题,据报道,这种技巧提高了 GP 的预测精度,从而带来了显著更好的性能。尽管 Hutter 等人 (2009) 提出了他们 EI 的闭合形式,但其中间推导过程迄今尚未提供。本文,我们对他们的命题给出了一个友好的推导过程。
查看原文
下载 PDF