LLM2D
基于风格先验建模的结构化多轨伴奏编配
Structured Multi-Track Accompaniment Arrangement via Style Prior Modelling
作者: Jingwei Zhao, Gus Xia, Ziyu Wang, Ye Wang
发布日期: 11/26/2024
arXiv ID: oai:arXiv.org:2310.16334v4

摘要

在音乐 AI 领域,从简单的乐谱创作丰富且结构化的多轨伴奏是一项极具挑战性的任务。这些挑战包括保持音轨的连贯性、确保长期的和谐性以及优化计算效率。本文介绍了一种新颖的系统,该系统利用先前对解耦风格因素的建模来应对这些挑战。我们的方法采用两阶段流程:首先,通过检索钢琴织体风格从乐谱中导出钢琴伴奏;随后,通过将管弦乐功能风格融入钢琴伴奏中生成多轨管弦乐编曲。我们的关键设计是使用矢量量化和独特的多分支 Transformer 来模拟管弦乐风格的长期流动,这使得灵活、可控和结构化的音乐生成成为可能。实验表明,通过将编曲任务分解成可解释的子阶段,我们的方法提高了生成能力并提高了效率。此外,我们的系统支持多种音乐类型,并在不同的作曲层次上提供风格控制。我们进一步证明,与现有基线相比,我们的系统在连贯性、结构和整体编曲质量方面均取得了优越的性能。