当前位置:首页 > 软件资讯 > Meta开源AI模型MusicGen 可将文本和旋律转化为完整乐曲

Meta开源AI模型MusicGen 可将文本和旋律转化为完整乐曲

分区:软件资讯 更新:2023-06-24 16:52:14

Meta最近在Github上开放了其AI语言模型MusicGen,该模型基于谷歌2017年推出的Transformer模型。顾名思义,MusicGen主要用于音乐生成,可以将文本和已有的旋律转化为完整的音乐。

R&D团队说:我们使用了20000小时的授权音乐来训练模型,并使用Meta的EnCodec编码器将音频数据分解成更小的单元进行并行处理,从而使MusicGen的运算效率和生成速度优于同类型的AI模型。& rdquo

此外,MusicGen还支持文本和旋律的组合输入。例如,您可以提议生成& ldquo轻快的歌曲& rdquo同时要求& ldquo结合贝多芬的欢乐颂& rdquo。

R&D团队还测试了MusicGen的实际性能。结果显示,与Google的MusicLM、Riffusion、Mousai、Noise2Music等音乐模型相比,MusicGen在测试音乐与文字提示的匹配度和作曲的可靠性方面表现更好,总体上略高于Google的MusicLM。

Meta已经允许该模型的商业使用,并在Huggingface上发布了一个web应用程序进行演示。

  • 最新资讯
  • 最新软件