arXiv:2502.02201v1 宣告类型：交叉 摘要：在我们的日常生活中，我们可以通过言语和手势自然地传达对物体的空间操作指令。将这种形式的互动转换为虚拟现实（VR）中的物体操作可能具有益处。我们提出了VR Mover这一基于LLM的解决方案，它可以理解并解释用户的口头指令，以支持物体操作。仅通过指指点点和说话，LLM就可以在无需结构化输入的情况下操作物体。我们的用户研究显示，VR Mover可以提升用户的人机交互效果、总体体验和多物体操作性能，同时减少工作负担和手臂疲劳。用户更倾向于使用提议的自然接口进行广泛的移动，可能会在需要精细调整时切换到工具或虚拟手。这些发现被认为将对基于LLM的物体操作接口的设计产生影响，突出了在VR环境中实现更直观、更高效的用户交互的潜力。