天工SkyMusic是什么
天工SkyMusic 是由昆仑万维推出的一款 AI 音乐生成大模型。它基于昆仑万维的「天工3.0」超级大模型构建,是目前国内唯一公开可用的 AI 音乐生成大模型。该模型旨在推动音乐创作的创新和个性化发展,通过先进的 AI 技术,根据用户输入生成具有丰富情感表达的音乐作品。
天工SkyMusic的主要特点
天工SkyMusic 拥有以下五大核心特点:
1. 高质量AI音乐生成:能够生成长达 80 秒、44100Hz 采样率的双声道立体声 AI 歌曲,保证音乐质量。
2. 人声“以假乱真”:AI 人声合成技术达到业内顶尖水平,尤其在中文人声合成方面,发音清晰,无异响。
3. 歌词段落控制:能够通过歌词控制歌曲情绪变化,区分不同歌词段落的情绪差异。
4. 多种音乐风格支持:支持包括说唱、民谣、放克、古风、电子等多种音乐风格。
5. 音乐智能表达-歌唱技巧学习:能学习和模仿多种歌唱技巧,如颤音、歌剧、吟唱等,提升情感表达。
天工SkyMusic的技术架构
天工SkyMusic 采用音乐音频领域类 Sora 模型架构:
- Large-scale Transformer 负责谱曲,学习 Music Patches 的上下文依赖关系,完成音乐可控性。
- Diffusion Transformer 负责演唱,通过 LDM 将 Music Patches 还原成高质量音频。
天工SkyMusic的使用方法
使用天工SkyMusic 进行音乐创作的步骤如下:
1. 下载安装:通过 App Store 或昆仑万维集团公众号获取下载链接,安装「天工」APP。
2. 进入音乐创作界面:在 APP 界面中找到「音乐」入口,点击进入。
3. 写歌词:点击「开始写歌」,输入歌名和歌词。如果没有歌词,可以使用 AI 写词功能。
4. 添加结构名称:在歌词中添加结构名称(如前奏、尾奏、主歌、副歌等),用括号括起来。
5. 选择参考歌曲:选择一首歌曲作为生成参考,确定歌曲基调。
6. 生成歌曲:点击「生成歌曲」,AI 将根据输入生成三首原创歌曲供选择。
公测与开放
2024年4月2日,天工SkyMusic 面向社会开启免费邀测,开放了 1000 个免费名额。4月17日,正式版随「天工3.0」面向全社会免费开放,并开启公测。
天工SkyMusic的社会反响
天工SkyMusic 自推出以来,凭借其逼真且充满情感的人声以及流畅的编配和旋律,迅速获得了广泛的好评。它使得即使是音乐初学者也能够将灵感转化为动听的歌曲。
天工SkyMusic对未来展望
昆仑万维团队计划在后续逐步迭代和添加新的能力,让天工SkyMusic 模型具备多模态的情感理解与表达能力。这预示着天工SkyMusic 将在未来拥有更加强大的功能和更广泛的应用场景。