摘要
视频生成技术发展迅速,并具有广泛的潜在应用。在这些技术中,摄像机控制对于生成准确满足用户期望的专业级视频至关重要。然而,现有的摄像机控制方法仍然存在一些局限性,包括控制精度和忽略主体运动动态的控制。在这项工作中,我们提出了I2VControl-Camera,这是一种新颖的摄像机控制方法,它显著增强了可控性,同时提供了对主体运动强度进行调整的能力。为了提高控制精度,我们采用摄像机坐标系中的点轨迹而不是仅使用外参矩阵信息作为我们的控制信号。为了准确控制和调整主体运动的强度,我们明确地对视频轨迹展开的高阶分量进行建模,而不仅仅是线性项,并设计了一个有效表示运动强度的算子。我们使用一个独立于基础模型结构的自适应器架构。在静态和动态场景上的实验表明,我们的框架在定量和定性方面都优于以前的方法。项目页面:https://wanquanf.github.io/I2VControlCamera