LLM2D
ShapeLib:使用大型语言模型设计 procedual 3D 形状抽象库
ShapeLib: designing a library of procedural 3D shape abstractions with Large Language Models
作者: R. Kenny Jones, Paul Guerrero, Niloy J. Mitra, Daniel Ritchie
发布日期: 2/14/2025
arXiv ID: oai:arXiv.org:2502.08884v1

摘要

arXiv:2502.08884v1 声明类型: cross 摘要: 过程表示是一种理想的、多功能且流行的形状编码方式。无论是手动创作还是使用数据驱动的方法来创作它们,仍然是具有挑战性的,因为一个良好的过程表示应该紧凑、直观且易于操作。形状分析长期存在的一个问题是,如何发现一个可重用的过程函数库,这些函数具有语义对齐的外露参数,能够解释整个形状家族。我们提出了ShapeLib作为第一个利用先进语言模型先验知识来设计3D形状抽象函数库的方法。我们的系统接受两种形式的设计意图:函数的文本描述(包括在库中应包含的函数)和种子形状的示例集。我们通过提出并验证函数的应用和实现来发现符合这种设计意图的过程抽象。库中发现的形状函数不仅表达能力强,还能超越种子集泛化到整个形状家族。我们训练了一个识别网络,该网络能够从不同的视觉模态(原语、体素、点云)中学习推断基于我们库的形状程序。我们的形状函数具有语义可解释的参数,可以通过修改这些参数来生成合理的形状变化。我们展示了这使得通过文本提示可以成功操作推断出的程序。我们在不同的数据集上评估了ShapeLib,并展示了与现有方法和替代方案相比的明显优势。