LLM2D
基于任务条件的专业模型集成用于连续学习
Task-conditioned Ensemble of Expert Models for Continuous Learning
作者: Renu Sharma, Debasmita Pal, Arun Ross
发布日期: 4/14/2025
arXiv ID: oai:arXiv.org:2504.08626v1

摘要

arXiv:2504.08626v1 宣布类型:交叉 摘要:机器学习中的一项主要挑战是在非稳态环境中保持已部署模型(例如,分类器)的准确性。非稳态环境导致数据分布的变化,从而影响准确性。使用新数据持续学习已部署模型可能是解决问题的一种方法。然而,一个关键问题是如何用新训练数据更新模型,使其在保持对旧数据准确性的同时适应新数据。在本项工作中,我们提出了一种基于任务条件的模型集成方法,以维护现有模型的性能。该方法基于任务归属信息构建专家模型的集成。基于本地异常概念且不同于专家模型的任务归属模型(in-domain models)在运行时为每个探针样本动态提供任务归属信息。为了评估所提出的方法,我们进行了三种设置的实验:第一种表示任务之间的数据分布变化(LivDet-Iris-2017),第二种表示任务之间及任务内部的数据分布变化(LivDet-Iris-2020),第三种表示任务之间的不相交数据分布(Split MNIST)。实验突显了所提出方法的优势。源代码可在 https://github.com/iPRoBe-lab/Continuous_Learning_FE_DM 获取。