arXiv:2502.12507v1 Announce Type: 横向 摘要：表格数据固有地表现出显著的特征异质性，但现有的基于变换器的方法缺乏专门的机制来处理这一特性。为弥补这一差距，我们提出了MAYA，一种基于编码器-解码器的变换器框架。在编码器中，我们设计了混合注意力（MOA），构建了多个并行的注意力分支，并在每个分支中平均特征，有效地融合了异质特征，同时限制了参数的增长。此外，我们采用合作学习，并引入动态一致性权重约束来生成更稳健的表示。在解码阶段，我们利用交叉注意力无缝地将表格数据与相应的标签特征整合。这种双重注意机制有效地捕捉了实例内和实例间的交互作用。我们在多种数据集上评估了所提出的方法，并将其与其他最先进的基于变换器的方法进行了比较。广泛实验证明，我们的模型在基于变换器的方法中，无论是表格分类任务还是回归任务，都实现了更优的效果。