arXiv:2504.08256v2 宣告类型: replace-cross 摘要：近年来，大型语言模型（LLMs）为虚拟现实（VR）中的上下文理解提供了新的机会。然而，VR上下文往往高度本地化和个性化，限制了一般用途LLM的有效性。为了解决这一挑战，我们提出了RAG-VR，这是一种结合了检索增强生成（RAG）的首个3D问答系统，该系统通过从本地化的知识数据库中检索外部知识来增强LLM，以提高答案质量。RAG-VR包括一个管道，用于提取关于虚拟环境和用户条件的全面知识，以实现准确的答案生成。为了确保高效的检索，RAG-VR将检索过程卸载到附近的边缘服务器，并在检索过程中仅使用必要的信息。此外，我们训练检索器有效地区分与问题相关的、无关的以及难以区分的信息。与两个基线系统相比，RAG-VR将答案准确性提高了17.9%-41.8%，并将端到端延迟降低了34.5%-47.3%。