Get best of the week

什么神经网络可以“唱歌”并执行死亡金属

让我们谈谈可以生成曲目甚至歌词的智能工具。这将取决于公司和实验室的决策以及爱好者的发展。


照片乔·格林 / Unsplash

神经网络写音乐...


它执行NSynth Super合成器。它是在AI系统的基础上构建的，它可以从预先录制的样本中形成自然界中不存在的新声音。该算法可以将长笛和鼓的声音结合起来。NSynth 可以与16种乐器一起使用-在它们的基础上，它可以产生超过10万种声音。他分析了它们的输入特性，然后进行线性插值，从而形成数学表示。

NSynth Super是一个开源项目。GitHub上存储库中的每个人都可以使用汇编的源代码和计划。

另一个例子是Dadabots人工智能系统，该系统由音乐家CJ Carr和Zack Zukowski开发。这个神经网络构成了死亡金属的乐曲-它是在加拿大Archspire团队的工作中接受训练的。基于AI的解决方案产生了非常和谐的声音，尽管听觉合成并不总是令人满意的-它们会定期叠加在尖锐的声学效果上。尽管对于所选样式，它看起来像是有机的波浪。您可以在YouTube上聆听Dadabots的作品，并有24小时不间断的直播。Jukedeck

也正在开发 AI音乐系统。这家初创公司正在开发一种用于生成轨道的工具以给定的心情和节奏。一年前，它被拥有TikTok 的公司收购。Jukedeck技术可帮助社交网络节省专利费。

...并且会唱歌


4月底，OpenAI中引入了这样的工具，称为Jukebox。它生成具有有意义的歌词和人声的作品。这是一个例子：


工程师在120万首歌曲（60万英语）的数据集上训练了神经网络。它们的文本和元数据来自LyricWiki库。为了生成新的音轨，AI系统使用VQ-VAE（矢量量化变分自动编码器）方法-压缩音轨并从中提取必要的声学信息。然后在其基础上形成新的成分。Jukebox花了大约9个小时来写一分钟的歌曲，但到目前为止，还不知道如何通过重复合唱来生成熟悉的歌曲。该系统还需要大量的计算资源-尚无法在家中计算机或工作室对其进行测试。将来，开发人员计划解决这些缺陷。

但是音乐家会被取代吗


用于生成音乐的智能乐器的作者说，机器算法并不是要取代作曲家，而是要扩大其艺术能力。

美国歌手Taryn Southern 使用基于AI的解决方案录制了一张专辑。神经网络为Break Break曲目创作了音乐，并生成了一个视频剪辑。 YACHT主唱Claire Evans还使用机器算法编写Chain Tripping。计算机根据克莱尔（Claire）的先前作品产生了新的旋律，表演者将最有趣的样本相互联系起来。

机器学习算法还可以帮助音乐家解决技术问题。例如，来自LANDR的开发人员提供了一种自动跟踪轨道的人工智能系统。已经有超过200万的表演者在使用它。


附加阅读：

“机器声音”：基于神经网络
的合成器语音合成器的历史：第一个机械装置
语音合成器的历史：计算机时代。


在Habré上向我们阅读的内容：


More articles:


All Articles