arXiv:2504.07840v2 公告类型: 替换交叉 摘要：大规模语言模型（LLMs）通过使人工智能聊天机器人能够进行基于自然语言的交流，已经彻底改变了人机交互。这些模型被设计得直观且用户友好，使用户能够以最小的努力表达请求。然而，尽管这些模型易于使用，研究表明用户往往在有效提示方面存在困难，导致响应效率低下。现有研究强调了LLMs在解释模糊或结构不良的提示方面的局限性，以及用户在制定精确查询方面面临的困难。本研究通过一项教育实验调查了学习者与AI之间的互动，该实验为参与者提供了有效的提示结构化指导。我们介绍了并比较了三种类型的提示指南：通过结构化方法开发的一种任务特定框架，以及两个基线方法。为了评估用户行为和提示的有效性，我们分析了来自107名用户共642次互动的数据集。使用Von NeuMidas，一种扩展的适用于LLM交互分析的实践注解方案，我们分类了常见的提示错误，并确定了反复出现的行为模式。然后，我们通过观察用户行为的变化、提示策略的遵循情况以及AI生成响应的整体质量，评估了不同指南的影响。我们的发现提供了用户如何与LLMs互动以及结构化提示指导在增强AI辅助沟通中的作用的深入理解。通过比较不同的教学框架，我们为提高用户在AI互动中的能力提供了新的见解，其对于提高AI素养、提高聊天机器人的可用性以及设计更响应式的AI系统具有重要意义。