摘要
arXiv:2502.07404v1 宣布类型: cross
摘要:人工介入循环(HITL)框架越来越多地被认为可以通过结合机器预测与人类专长来提高情绪估计系统中的注释准确性。本研究重点在于将一款高性能的基于图像的情绪模型整合到HITL注释框架中,评估人机互动的协作潜力,并识别成功合作的关键心理和实际因素。具体而言,我们研究了不同模型可靠性和认知框架如何影响人在HITL系统中的信任、认知负荷和注释行为。我们证明了模型可靠性和心理框架显著影响注释者的信任、参与度和一致性,提供了优化HITL框架的见解。通过三项实验场景(基础模型可靠性S1、伪造错误S2和由负面框架引入的认知偏见S3)并涉及29名参与者,我们分析了行为和定性数据。可靠的预测在S1中产生了高度信任和注释一致性,而在S2中不可靠的输出则导致了更高的批判性评价,但也增加了挫败感和响应的变化性。在S3中,负面框架揭示了认知偏见如何影响参与者把模型视为更具相关性和准确性的感知,即使关于其可靠性的信息是不准确的。这些发现强调了可靠的人工智能输出和心理因素在塑造有效的人机协作中的重要性。通过利用人类监督和自动化系统的长处,本研究建立了一个可扩展的HITL框架用于情绪标注,并为进一步应用于自适应学习和人机交互奠定基础。