LLM2D
基于门控动态可学习注意力机制的孪生Transformer在田纳西东曼过程故障检测与诊断中的应用
Twin Transformer using Gated Dynamic Learnable Attention mechanism for Fault Detection and Diagnosis in the Tennessee Eastman Process
作者: Mohammad Ali Labbaf-Khaniki, Mohammad Manthouri, Hanieh Ajami
发布日期: 11/26/2024
arXiv ID: oai:arXiv.org:2403.10842v4

摘要

故障检测与诊断 (FDD) 是确保工业过程安全和效率的关键任务。我们针对田纳西伊士曼过程 (TEP)——一种广泛使用的化工过程控制基准——提出了一种新颖的 FDD 方法。该模型采用两个独立的 Transformer 分支,能够独立处理输入数据并提取多样化的信息。我们引入了一种新颖的注意力机制,即门控动态可学习注意力 (GDLAttention),它集成了门控机制和动态学习能力。门控机制调节注意力权重,使模型能够关注输入中最相关的部分。动态学习方法在训练过程中调整注意力策略,从而可能提高性能。该注意力机制使用双线性相似度函数,在捕获查询向量和键向量之间复杂关系方面提供了更大的灵活性。为了评估我们方法的有效性,我们针对 TEP 中的 21 个和 18 个不同的故障场景对其进行了测试,并将它的性能与几种已建立的 FDD 技术进行了比较。结果表明,该方法在准确性、误报率和误分类率方面均优于其他方法。这突显了该方法在复杂工业过程 FDD 中的鲁棒性和有效性。