arXiv:2409.02370v4 公告类型: 交叉替换 摘要：大型语言模型(LLMs)最近展示了其在语言理解方面的非凡能力。然而，如何全面评估LLMs的情感能力仍然是一项挑战。本文探讨了LLMs在文本模态中检测和应对情感的能力。随着LLMs在各种应用中的整合日益增多，理解它们对情感语气的敏感性变得尤为重要，因为这会影响用户体验和基于情感的任务的效果。我们进行了一系列实验，以评估几个主要LLMs在识别和适当地应对正向、负向和中性情感方面的能力。模型的输出在各种情感基准上进行分析，并与人类评估进行比较。我们的发现表明，尽管LLMs显示出对情感的基本敏感性，但在准确性和一致性方面存在巨大差异，强调了在训练过程中需要进一步改进以更好地捕捉细微的情感线索。例如，在我们的一些发现中，模型可能错误地将强烈正向情感分类为中性，或者未能识别文本中的讽刺或反语。这些分类错误突显了情感分析的复杂性和模型需要改进的领域。另一个方面是，不同的LLMs在相同的数据集上可能有不同的表现，这取决于它们的架构和训练数据集。这种差异性需要更加深入地研究哪些因素导致了性能差异以及如何进行优化。