摘要
arXiv:2502.14222v1 交叉发布类型:交叉
摘要:有效的传感器数据管理策略对于推进交通研究至关重要,尤其是在当前数据驱动的时代,因为人工智能领域出现了诸多新应用。本文提出了全面的指导方针,涵盖交通传感器的存档静态数据和实时数据流的管理。实时系统架构将各种应用与数据采集系统(DAQ)集成在一起。通过部署自研的开源Avena软件平台以及NATS消息系统作为安全通信代理,确保可靠的数据交换。健壮的数据库如TimescaleDB促进了有序存储,而可视化平台如Grafana提供了实时监控功能。
相比之下,静态数据标准解决了处理无结构、大量数据集的挑战。这些标准提倡使用成本效益高的批量云存储来存储未经处理的传感器数据,并使用关系型数据库记录总结分析。它们强调了使用类似FME的云数据传输工具以高效方式将传感器数据从本地存储迁移至云的重要性。此外,将稳健的可视化工具集成到框架中,有助于从这些复杂数据集中推导出模式和趋势。
提议的应用于INDOT的现实世界案例研究,涉及I-65和I-69 Greenfield地区。对于实时数据收集,使用了Campbell Scientific DAQ系统,这使得连续生成和监测传感器指标成为可能。对于归档的I-69数据库,汇总数据存储在Oracle中,而未经处理的数据存储在SharePoint中。结果强调了所提指南的有效性,并激发了其在研究项目中的应用。