图片

ACE-Step是一种用于音乐生成的新颖开源基础模型,它克服了现有方法的关键限制,并通过整体架构设计实现了最先进的性能。当前方法在生成速度、音乐连贯性和可控性之间面临固有的权衡。例如,LLM基于的模型(例如Yue、SongGen)擅长歌词对齐,但推理缓慢和结构伪影。另一方面,扩散模型(例如DiffRhythm)可以实现更快的合成,但通常缺乏长程结构连贯性。

项目特点

--支持所有主流音乐风格,支持短标签、描述性文本、用例场景等各种描述格式。
--能够以适当的乐器和风格生成不同流派的音乐。
--支持 19 种语言,其中表现最好的 10 种语言包括:🇺🇸 英语、🇨🇳中文、🇷🇺俄语、🇪🇸西班牙语、🇯🇵日语、🇩🇪德语、🇫🇷法语、🇵🇹葡萄牙语、🇮🇹意大利语、🇰🇷韩语。
--支持不同流派和风格的各种器乐生成。
--能够为每种乐器制作具有适当音色和表现力的逼真器乐音轨。
--可以使用多种乐器生成复杂的编曲,同时保持音乐的连贯性。
--能够以良好的质量呈现各种声乐风格和技巧。
--支持不同的人声表达方式,包括各种歌唱技巧和风格。

应用场景

--基于根据纯人声数据微调的 LoRA,允许从歌词中直接生成人声样本。
--提供许多实际应用程序,例如声乐演示、指导轨道、歌曲创作辅助和声乐编曲实验。
--提供一种快速方法来测试歌词在演唱时的声音,帮助词曲作者更快地迭代。

视频教程

云平台一键部署【ACE-Step】Suno平替,通过提示词和歌词AI生成歌曲工具_哔哩哔哩_bilibili

启动开发环境

进入【ACE-Step】项目主页中,点击运行一下,将项目一键克隆至工作空间,『社区项目』推荐适用的算力规格,可以直接立即运行,省去个人下载数据、模型和计算算力的大量准备时间。

图片

配置完成,点击进入开发环境,根据主页项目介绍进行部署。

图片

使用方法

选中2.1单元格,点击运行

图片

等待生成 local URL,右侧添加端口 7860。

图片

webui界面展示

图片

示例展示(歌曲示例可在趋动云公众号试听)

➫温馨提示: 完成项目后,记得及时关闭开发环境,以免继续产生费用!

图片

智汇全球,趋动未来

『社区项目』汇聚全球智慧,是促进技术交流的宝贵平台,期待每一位AI爱好者体验一键部署功能的强大魅力。

图片

同时,我们也热切盼望每一位码友加入,分享您的精品作品,共筑这个充满活力与创新的技术乐园。

Logo

欢迎加入DeepSeek 技术社区。在这里,你可以找到志同道合的朋友,共同探索AI技术的奥秘。

更多推荐