讯飞智文
当前位置:首页>AI工具>AI训练模型>ACE-Step:阶跃星辰和ACE Studio联合发布的开源音乐基础模型

ACE-Step:阶跃星辰和ACE Studio联合发布的开源音乐基础模型

ACE-Step是什么?

ACE-Step 是由阶跃星辰与 ACE Studio 联合开源的音乐大模型,旨在为音乐爱好者提供高效、灵活且高质量的音乐创作工具。该模型参数量为 3.5B,具备多语言支持、快速生成、强可控性及易于拓展等特点,支持多种音乐创作场景,如音频编辑、人声合成、伴奏生成等。

ACE-Step:阶跃星辰和ACE Studio联合发布的开源音乐基础模型

ACE-Step的功能特点

  1. 高效多元创作支持
    • 多语言生成:支持 19 种语言(包括中文、英文、西班牙语等)的歌曲生成,满足跨文化创作需求。
    • 快速生成:提供快速和慢速两种生成模式,最快 15 秒即可生成一整首歌,慢速模式仅需 32 秒。
    • 高质量音乐创作:支持多种主流音乐风格,生成的音乐在旋律、结构上更完整,更具情感表达力。
  2. 强可控性
    • Edit 功能:可在不改变旋律的情况下,精确修改歌词内容、语气或情感表达。
    • Retake/Repaint 功能:可重新生成风格相似的歌曲或对特定部分进行局部调整,优化创作结果。
  3. 易于拓展
    • LoRA 微调:可根据创作者需求进行特定风格的定制化训练。
    • ControlNet 微调:可根据输入的旋律或人声自动生成相匹配的伴奏。

ACE-Step的模型优势

  • 全曲生成:ACE-Step 通过输入完整上下文生成音乐,真正实现了旋律与结构的一致性。尤其在歌曲的结尾部分能够自然复用开头的旋律,提供更加连贯的音乐体验,避免了断片式创作的突兀。
  • 精准时长控制:ACE-Step 能生成不同时长的完整音乐,无需后期剪辑。比如,ACE-Step 针对60 秒广告,能精确生成完整配乐。
  • 灵活输入格式:模型支持更自由的文本描述和风格输入,极大地拓宽了创作边界,允许创作者根据个人需求随心所欲地设定创作风格与内容。
  • 多语言与多风格生成:ACE-Step 支持多种语言(如中文、英语、西班牙语等)和多样化的音乐风格,从而更好地契合全球用户的创作需求,更加贴近现代音乐审美。

ACE-Step的应用场景

  1. 音乐创作:为创作者提供高效、灵活的音乐创作工具,支持多种风格和语言的歌曲生成。
  2. 音频编辑:通过 LoRA 和 ControlNet 微调,实现音频编辑、人声合成、伴奏生成等个性化创作需求。
  3. 泛文娱产业:推动音乐生成技术在广告、影视、游戏等领域的落地应用,为用户提供专业的音乐技术服务。

ACE-Step的开源链接

©版权声明:如无特殊说明,本站所有内容均为AIHub.cn原创发布和所有。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。否则,我站将依法保留追究相关法律责任的权利。 Trae
0 条回复 A文章作者 M管理员
    暂无评论内容
error: