LLM2D
使用生成AI超越维度:增强现实中的实时3D模型生成
Transcending Dimensions using Generative AI: Real-Time 3D Model Generation in Augmented Reality
作者: Majid Behravan, Maryam Haghani, Denis Gracanin
发布日期: 5/1/2025
arXiv ID: oai:arXiv.org:2504.21033v1

摘要

arXiv:2504.21033v1 Announce Type: 横跨多个领域的 摘要:传统的3D建模需要技术专长、专业软件以及耗时的过程,使其对许多用户来说不可用。我们的研究旨在通过将生成型AI与增强现实(AR)结合起来,形成一个协同系统,使用户能够轻松地实时生成、操作和与3D模型进行交互,直接在AR环境中进行。利用最新的AI模型如Shap-E,我们解决了在AR环境中将2D图像转换为3D表示的复杂挑战。通过先进的对象检测方法,如Mask R-CNN,解决了诸如对象隔离、处理复杂背景和实现无缝用户交互等关键挑战。来自35名参与者的评估结果显示,系统的总体软件可用性量表(SUS)评分为69.64,更频繁接触AR/VR技术的参与者对系统的评价更高,评分为80.71。这项研究特别适用于游戏、教育和基于AR的电子商务应用,为不具备特殊技能的用户提供直观的模型创建。