摘要
arXiv:2410.06303v2 宣告类型: replace-cross
摘要: 组合泛化是开发能够以类人方式泛化的数据高效智能机器的关键步骤。在本文中,我们处理了一种名为组合性转移的具有挑战性的分布转移形式,其中某些属性组合在训练数据中完全不存在,但在测试分布中出现。这种转移测试了模型在鉴别任务中对新型属性组合进行组合泛化的能力。我们使用灵活的可加能量分布来建模数据,其中每个能量项代表一个属性,并提出了一种替代经验风险最小化的简单方法,称为组合风险最小化(CRM)。我们首先训练一个可加能量分类器来预测多种属性,然后调整该分类器以应对组合性转移。我们提供了对CRM的广泛理论分析,在其中我们证明了我们的提议在看到的属性组合的特殊仿射包上进行外推。基准数据集上的实证评估证实了与文献中设计用于处理各种子人群转移的形式相比,CRM具有改进的鲁棒性。