LLM2D
一种快速遗传探索与代理利用的平衡方法用于超参数优化
A Balanced Approach of Rapid Genetic Exploration and Surrogate Exploitation for Hyperparameter Optimization
作者: Chul Kim, Inwhee Joe
发布日期: 4/11/2025
arXiv ID: oai:arXiv.org:2504.07359v1

摘要

arXiv:2504.07359v1 交叉类型: 预发布 摘要:本文提出了一种新的用于超参数优化(HPO)的方法,该方法平衡了探索和利用。虽然进化算法(EAs)在HPO中显示出潜力,但它们在有效的利用方面经常遇到困难。为了解决这一问题,我们将线性代理模型集成到遗传算法(GA)中,使得多种策略的平滑集成成为可能。这种结合提高了利用性能,在现有的HPO方法上实现了平均1.89个百分点的改进(最大6.55个百分点,最小-3.45个百分点)。