第五代 (5G) 网络提供了先进的服务，支持物联网 (IoT) 中的智能交通、互联医疗和智慧城市等应用。然而，这些进步带来了重大的安全挑战，网络攻击日益复杂。本文提出了一种基于联邦学习和大型语言模型 (LLMs) 的鲁棒入侵检测系统 (IDS)。我们的 IDS 的核心基于 BERT，这是一种用于识别恶意网络流的 Transformer 模型。我们对该 Transformer 模型进行了改进，以优化其在资源有限的边缘设备上的性能。实验在集中式和联邦学习环境中进行。在集中式环境中，模型的推理精度达到了 97.79%。在联邦学习环境中，该模型在多个设备上使用 IID（独立同分布）和非 IID 数据进行训练，基于各种场景，确保数据隐私并遵守相关规定。我们还利用线性量化压缩模型，以便在边缘设备上部署。这种压缩导致模型大小减少了 28.74%，精度略微下降了 0.02%。结果表明，LLMs 可用于部署在物联网生态系统中，突出了它们在计算和存储资源受限的设备上运行的能力。