摘要
arXiv:2405.12236v2 宣告类型: 更新
摘要:实时物联网(IoT)应用需要实时支持,以处理不断增长的计算资源需求,以处理IoT工作负载。雾计算能够以分布式方式提供此类资源的高可用性。然而,这些资源必须有效地管理,以在异构雾资源之间分配不可预测的流量需求。本文提出了一种基于多智能体强化学习(MARL)的完全分布式负载均衡解决方案,该解决方案能智能地分配IoT工作负载,以优化等待时间,同时在雾网络中提供公平的资源利用。这些智能体利用迁移学习实现终身自我适应,以动态变化的环境。通过利用分布式决策制定,MARL智能体有效地将等待时间最小化,与单一集中式智能体解决方案和其他基线相比,增强了端到端执行延迟。此外,完全分布式解决方案允许全球规模的实施,其中智能体可以在小协作区域独立工作,利用附近的本地资源。此外,我们分析了实际频率的影响,以观察环境的状态,而文献中常见的假设是从每次需要的动作开始实时观察状态是可获得的。研究结果突出了基于时间段的Gossip多播协议与假设每次生成的工作负载都可实时观察状态之间的现实性和性能之间的权衡。