arXiv:2505.06333v1 宣告类型: cross 摘要：在现代装配流水线中，识别异常对于确保产品质量和运营效率至关重要。传统的单一模态方法在复杂的数据丰富且多模态的预测环境中难以捕捉到精确异常预测所需的高度复杂的相互关系。本文提出了一种神经符号AI和融合方法，用于装配流水线中的多模态异常预测。我们引入了一种基于时间序列和图像的融合模型，利用决策级融合技术。我们的研究基于多模态学习的三个主要新颖方法：基于时间序列和图像的决策级融合建模、融合的迁移学习以及蕴含知识的学习。我们使用我们推导的公开可用的多模态数据集评估了新型方法，并开展了全面的消融研究，以评估我们的预处理技术和融合模型相对于传统基线的影响。结果表明，基于神经符号AI的融合方法，利用迁移学习，能够有效利用时间序列和图像数据的补充优势，提供一种在装配流水线异常预测中更为稳健且可解释的方法，性能得到增强。 数据集、重现结果的代码、补充材料和演示可在 https://github.com/ChathurangiShyalika/NSF-MAP 上获取。