LLM2D
走向通用人工智能或个性化人工智能?关于个性化联邦智能基础模型的综述
Towards Artificial General or Personalized Intelligence? A Survey on Foundation Models for Personalized Federated Intelligence
作者: Yu Qiao, Huy Q. Le, Avi Deb Raha, Phuong-Nam Tran, Apurba Adhikary, Mengchun Zhang, Loc X. Nguyen, Eui-Nam Huh, Dusit Niyato, Choong Seon Hong
发布日期: 5/13/2025
arXiv ID: oai:arXiv.org:2505.06907v1

摘要

arXiv:2505.06907v1 宣布类型: 新颖 摘要: 大型语言模型(LLMs)如ChatGPT、DeepSeek和Grok-3的兴起重塑了人工智能的格局。作为建立在LLMs基础上的基础模型(FMs)的典型案例,这些模型展示了生成类人类内容的显著能力,使我们更接近实现通用人工智能(AGI)。然而,它们的大规模特性、对隐私问题的敏感性以及巨大的计算需求给终端用户提供了个性化定制带来了一些重大挑战。为了解决这些问题,本文提出了人工个性化智能(API)的愿景,专注于将这些强大的模型适应特定用户的需要和偏好,同时保持隐私和效率。具体来说,本文提出了一种个性化联邦智能(PFI)的方法,将联邦学习(FL)的隐私保护优势与FMs的零样本泛化能力相结合,使得在边缘实现个性化、高效且隐私保护的部署成为可能。我们首先回顾了联邦学习和FMs的最新进展,并讨论了利用FMs增强联邦系统潜力的可能性。然后,我们探讨了实现PFI的核心动机,并探索了该领域的有希望的机会,包括高效的PFI、可信赖的PFI以及基于检索增强生成(RAG)的PFI。最后,我们概述了部署FM驱动的边缘FL系统的关键挑战和未来研究方向,这些系统提供了增强的个性化、计算效率和隐私保障。总体而言,本文旨在为API的发展奠定基础,作为AGI的补充,特别关注PFI作为关键技术的作用。