MusicGen是什么?
MusicGen 是一个由Meta发布的开源 AI 音乐生成模型,可以根据你输入的描述文本生成新的音乐,也可以上传现有的音乐旋律作为参考。
MusicGen基于 Transformer 架构,可以高效处理音频和文本数据。测试表明,MusicGen 的性能可与 Google 的 MusicLM 媲美。
MusicGen可以做什么?
- 文本提示音乐生成:MusicGen 可以根据文本提示生成新的音乐片段,这些提示可以选择性地与现有的旋律对齐。
- 高质量样本生成:通过使用高效的令牌交错模式和单阶段方法,MusicGen 可以生成高质量的音乐样本,无需复杂的级联模型。
如何使用MusicGen?
MusicGen在线体验地址:https://huggingface.co/spaces/facebook/MusicGen;
使用步骤如下:
- 打开:https://huggingface.co/spaces/facebook/MusicGen;
- 如下图所示,输入文本描述,即你想生产的音乐描述;
- 上传参考的音乐旋律,这是个可选项,也可以不上传;
- 点击下方的生成【Generate】按钮,等待几十秒即可生成音乐;
- 点击播放最右边生成的音乐,即可播放和下载。
另外,在操作下方,也提供了一些参考demo,点击即可体验。
相关资源链接
- 论文地址:Paper
- 谷歌实验室:Google Colab
- 源代码:Github
- 在线体验:Demo