OpenAI首次推出Jukebox这是一种机器学习框架可创建自己的音乐
人工智能研究机构OpenAI公司。已经发布了一种新的机器学习框架,该框架可以在接受原始音频训练后生成自己的音乐。
新工具称为Jukebox,结果令人印象深刻。尽管它发出的歌曲听起来不像真实的声音,但它们与原始作品非常接近。
OpenAI在博客中表示,之所以选择从事音乐工作,是因为这是AI难以置信的课题。
OpenAI的研究人员表示,他们使用原始音频来训练Jukebox模型,然后再吐出原始音频作为回报,而不是钢琴演奏者可能会使用的“符号音乐”,因为它不包含声音。研究人员首先使用卷积神经网络对用于训练框架的原始音频进行编码和压缩。然后,他们使用所谓的“变压器”来生成新的压缩音频,然后将其转换回新生成的原始音频。
这不是OpenAI制作音乐的第一步。去年,它创建了一个称为MuseNet的AI模型,该模型可以生成包含15种不同风格的多达10种乐器的新音乐,其中包括莫扎特等古典作曲家和Lady Gaga等当代艺术家。但是,尽管MuseNet无法生成自己的歌词,但Jukebox却可以。
Jukebox模型在120万首歌曲的原始数据集上进行了训练,其中包括60万种英语,并使用LyricWiki的元数据和歌词来重建歌手的声音。研究人员承认,自动点唱机确实有其局限性。
OpenAI团队写道:“虽然点唱机在音乐质量,连贯性,音频样本的长度以及对艺术家,流派和歌词的适应能力方面都迈出了一大步,但这些世代与人类创造的音乐之间仍然存在巨大差距,” OpenAI团队写道。“例如,虽然生成的歌曲显示出本地音乐的连贯性,遵循传统的和弦模式,甚至可以表现出令人印象深刻的独奏,但我们听不到熟悉的大型音乐结构,如合唱重复出现。
正如一些Twitter用户指出的那样,该实验可能会对OpenAI产生一些法律影响。
也就是说,自动点唱机是一项令人印象深刻的成就,再次突破了AI技术可能实现的范围。的确,Constellation Research Inc.分析师Holger Mueller告诉SiliconANGLE,该项目更能证明AI不再迈出第一步,而是迈出了一大步。
穆勒说:“研究人员不会回避人工智能研究中剩下的围绕创造力的前沿领域。” “可以将音乐与歌词结合在一起的AI模型是朝着被认为是禁止进入的领域迈出的一大步。创造力仍然是AI的一大前沿领域,但我们与OpenAI的Jukebox的距离越来越近。”