arXiv:2504.12262v1 类别: cross 摘要: 空间时间学习由于空间依赖性和时间依赖性的复杂相互作用、数据的高维性和扩展性约束而具有挑战性。在科学领域，这些挑战进一步加剧，因为数据往往分布不规则（例如，由于传感器故障导致的缺失值）且数据量大（例如，高保真模拟），这带来了额外的计算和建模难题。在本文中，我们提出了SCENT，一种新型的可扩展且考虑连续性的时空表示学习框架。SCENT将插值、重构和预测统一在一个架构中。基于基于变压器的编码器-处理器-解码器基础架构，SCENT引入可学习的查询以增强泛化能力和基于查询的交叉注意力机制以有效捕捉多尺度依赖性。为了确保在数据规模和模型复杂性方面的可扩展性，我们整合了稀疏注意力机制，这使得输出表示更加灵活，并且可以在任意分辨率下进行高效评估。通过广泛的模拟和实际实验，我们验证了SCENT，展示了其在多个具有挑战性的任务中达到了最先进的性能，同时实现了更好的可扩展性。