摘要
生成式预训练模型的快速发展正在推动技术进步从聊天机器人等基本应用向更复杂的基于代理的系统转变。将 6G 系统与大型语言模型 (LLM) 代理和数字孪生 (DT) 的副驾驶相结合,以管理具有诸如原生 AI 服务和传感等新兴功能的高度复杂通信系统,具有巨大的潜力和必要性。通过 6G 导向的代理,基站可以理解各种动态上层任务的传输需求,自动编排最佳系统工作流程。通过不断从 6G DT 获取反馈进行强化,代理最终可以相应地提高实际系统的性能。与为通用应用而设计的现有 LLM 代理不同,6G 导向的代理旨在利用大量的额外专家知识进行高度严格和精确的规划,这不可避免地需要从模型训练到实现的特定系统设计。本文提出了一种构建面向任务的 6G LLM 代理的新颖综合方法。我们首先提出了一种两阶段的持续预训练和微调方案,以构建满足各种应用场景需求的领域基础模型和专业专家模型的多样性。此外,提出了一种基于语义检索的新颖推理框架,用于利用现有的通信相关功能。示例任务(例如物理层任务分解)的实验结果表明了所提出的范式的可行性和有效性。