arXiv:2502.05500v1 宣告类型: cross 摘要：气体泄漏和电弧放电在工业环境中存在显著风险，需要强大的检测系统以确保安全和操作效率。受人类协议中结合视觉识别与声学验证的启发，本研究提出了一种基于深度学习的机器人系统，用于自主检测和分类制造业环境中的气体泄漏和电弧放电。该系统设计用于完全在机器人上执行所有实验任务。该系统利用一个采样率为96 kHz的112通道声学相机捕捉超声波频率，并在多种工业场景下处理实际数据集。这些数据集包括多种气体泄漏配置（例如，针孔、开口端）和不同类型的部分放电（如电晕、表面、悬浮放电），并在不同的环境噪声条件下进行记录。所提出的系统集成了视觉检测和波束形成增强的声学分析管道。信号通过STFT进行变换，并通过伽马校正进行细化，从而实现稳健的特征提取。一种受Inception启发的CNN进一步分类危害，实现99%的气体泄漏检测准确率。该系统不仅能检测单个危害源，还能通过融合来自视觉和声学传感器的多模态数据提高分类的可靠性。在回声和噪声增强的环境中进行测试时，该系统比传统模型的性能高出44%以上，实验任务精心设计以确保公平性和可重现性。此外，该系统优化了实时部署，保持在移动机器人平台上进行推断的时间为2.1秒。通过模仿人类般的检查协议并整合视觉与声学模态，本研究提供了一种有效的工业自动化解决方案，显著提高了安全性和操作可靠性。