摘要
arXiv:2505.07012v1 交叉公告类型:
摘要:手影艺术是一种引人入胜的艺术形式,巧妙地利用手影在墙上复制出具有表现力的形状。在本文中,我们研究了一个逆问题:给定一个目标形状,找到左右手的姿态,使它们结合在一起产生最接近输入的影子。这一问题并不简单,因为3D手的姿态设计空间非常庞大,但由于解剖学限制而受到限制。此外,虽然输入是无色且无纹理的,但我们仍需关注输入的形状和关键特征。为应对这些挑战,我们设计了Hand-Shadow Poser,这是一个三阶段流水线,以解耦解剖学约束(由手部负责)和语义约束(由影子形状负责):(i) 生成手分配模块,探索多种但合理的左右手形状假设;(ii) 通用手影对齐模块,通过相似性驱动的策略推理粗略的手部姿态;(iii) 影子特征感知的细化模块,优化手部姿态以实现物理合理性并保留影子特征。此外,我们设计了该流水线能够在通用的公共手部数据上进行训练,从而避免使用任何专门的数据集进行训练。为了验证方法的有效性,我们构建了一个包含210个不同复杂度的手影形状的基准数据集和一系列全面的评估指标,包括一种基于DINOv2的新颖评估指标。通过与多个基线方法和用户研究的广泛比较,我们的方法被证明能够有效地为基准数据集中超过85%的案例生成双手法部姿态,并适用于多种手部形状。