LLM2D
通过通才推荐实现高效的多任务学习
Efficient Multi-Task Learning via Generalist Recommender
作者: Luyang Wang, Cangcheng Tang, Chongyang Zhang, Jun Ruan, Kai Huang, Jason Dai
发布日期: 4/9/2025
arXiv ID: oai:arXiv.org:2504.05318v1

摘要

arXiv:2504.05318v1 类型: cross 摘要: 多任务学习(MTL)是一种常见的机器学习技术,它允许模型在不同任务之间共享信息,并提高所有任务的推荐准确率。现有的许多MTL实现面临着可扩展性问题,随着任务数量的增加,训练和推理性能可能会下降,这会限制基于MTL的推荐系统在实际应用场景中的使用。受大型语言模型近期进展的启发,我们开发了一个端到端高效且可扩展的通用推荐器(GRec)。GRec通过利用NLP头部、并行Transformer以及宽深结构来处理多模态输入。这些输入随后通过一个新的任务-句子级别路由机制结合并输入模型,从而在不牺牲性能的情况下增强模型在多个任务上的能力。离线评估和在线实验表明,GRec显著优于我们之前的各种推荐解决方案。GRec已在一家最大的电信网站和应用程序中成功部署,每天有效地管理着大量的在线流量。