LLM2D
通过超球面表示实现约束机器学习
Constrained Machine Learning Through Hyperspherical Representation
作者: Gaetano Signorelli, Michele Lombardi
发布日期: 4/14/2025
arXiv ID: oai:arXiv.org:2504.08415v1

摘要

arXiv:2504.08415v1 Announce Type: cross 摘要:确保机器学习模型输出满足约束条件是在许多应用中至关重要的一环,尤其是在安全性要求极高的领域。现代方法主要依赖于训练时的惩罚方法,但这些方法并不能保证完全避免约束违反;或者依赖于特定的约束模型架构(例如,用于单调性);或者依赖于输出投影,这需要解决一个可能计算成本高昂的优化问题。我们提出了一种新的方法——超球面约束表示法,该方法可以通过一种不同的表示系统在凸且有界的可行区域(一般化到星型域)中强制约束。该方法将欧几里得坐标转换为与受限区域相关的超球面坐标,这些坐标只能表示可行点。在合成数据集和真实世界数据集上的实验表明,我们的方法在预测性能上与其它方法相当,可以保证100%的约束满足,并且在推理时计算成本最低。