摘要
arXiv:2503.15469v3 通知类型: 替换-交叉
摘要:文本分类是自然语言处理中的一个基本任务,旨在将文本数据归类为预定义的标签。传统方法在处理复杂的语言结构和语义依赖方面存在困难。然而,深度学习的兴起,尤其是循环神经网络和基于Transformer的模型,极大地推动了该领域的进步,通过实现精细的特征提取和上下文感知的预测。尽管这些改进取得了显著成果,现有的模型仍然在平衡可解释性、计算效率和长范围上下文理解方面存在局限。为了解决这些挑战,本文提出了一种动态双向Elman注意力网络(DBEAN)。DBEAN结合了双向时间建模与自注意力机制。它动态地为输入的关键段分配权重,从而改进上下文表示并保持计算效率。