LLM2D
受众参与的艺术:基于LLM的科学研究演讲快速判断方法
The Art of Audience Engagement: LLM-Based Thin-Slicing of Scientific Talks
作者: Ralf Schm\"alzle, Sue Lim, Yuetong Du, Gary Bente
发布日期: 4/16/2025
arXiv ID: oai:arXiv.org:2504.10768v1

摘要

arXiv:2504.10768v1 宣称类型: cross 摘要:本文在科学演讲的背景下探讨了薄片切割方法——基于少量信息做出准确判断的能力。我们借鉴了非言语沟通和个性心理学的研究,表明简短的摘录片段(薄片)能够可靠地预测整体演讲质量。通过一个包含一百多场真实科学演讲的新型语料库,我们使用大型语言模型(LLMs)来评估完整演讲及其摘录片段的转录文本。通过将LLM基于的短摘录评估与完整演讲评估相关联,我们确定了准确预测所需的信息量。我们的研究结果表明,LLM基于的评估与人类评分高度一致,证明了其有效性和可靠性。关键的是,即使非常短的摘录片段(不到演讲的10%)也强烈预测整体评估。这表明演讲的第一时刻传达了相关的信息,这些信息用于质量评估,并塑造持久印象。这些发现跨越了不同的LLM和提示策略,具有稳健性。这项工作将薄片切割研究扩展到公开演讲,并将印象形成理论与LLM和当前的人工智能通信研究连接起来。我们讨论了对信息接收的沟通和社会认知研究的影响。最后,我们建议一种基于LLM的薄片切割框架作为可扩展的反馈工具,以增强人类沟通。