LLM2D
AMAD: 自动掩蔽注意机制在无监督多变量时间序列异常检测中的应用
AMAD: AutoMasked Attention for Unsupervised Multivariate Time Series Anomaly Detection
作者: Tiange Huang, Yongjun Li
发布日期: 4/28/2025
arXiv ID: oai:arXiv.org:2504.06643v3

摘要

arXiv:2504.06643v3 宣告类型: replace-cross 摘要:无监督多变量时间序列异常检测(UMTSAD)在金融、网络和传感器系统等多个领域发挥着关键作用。近年来,由于深度学习在一般顺序任务中的出色表现,许多模型专门用于深度UMTSAD任务并取得了令人印象深刻的成果,特别是基于Transformer和自我注意力机制的模型。然而,这些模型底层的序列异常关联假设往往局限于特定预定义的模式和场景,如集中的或峰值的异常模式。这些限制阻碍了它们在各种异常情况下的泛化能力,尤其是标签缺乏的情况下构成了重大挑战。为了应对这些问题,我们提出了AMAD,它将**A**uto**M**asked Attention 结合到UMTS**AD** 场景中。AMAD 引入了一种基于AutoMask机制的新结构和注意力mixup模块,形成了一个简单且通用的异常关联表示框架。该框架通过最大最小训练策略和局部-全局对比学习方法进一步增强。通过结合多尺度特征提取与自动相对关联建模,AMAD 提供了一种针对UMTSAD挑战的 robust 和可适应的解决方案。大量实验结果表明,该提出的模型在多种数据集上与最先进的基准相比,达到了具有竞争力的性能结果。