您当前的位置:主页 > I生活图 >Google开源音效合成器!NSynthSuper用机器学习 >

Google开源音效合成器!NSynthSuper用机器学习

发布时间:2020-06-07  浏览量:990  点赞:889

    Google开源音效合成器!NSynthSuper用机器学习
    NSYNTH SUPER 实验原型

    将 16 种原始音源输入到 NSynth 演算法中,最终生成了超过 10 万种新的音色。

    技术的进步会给艺术创作带来啓发。Google 发表了一个零门槛的音乐製作工具,让普通人也能进行创作。最近,Google 推出了 NSynth Super,这次他们想用机器学习来创造全新的乐器音色。

    2017 年 4 月,Google Brain 团队推出了 NSynth,利用神经网路来学习声音特徵,然后根据这些特徵生成一种全新的声音。NSynth Super 是这项技术的硬体版本,利用这个带触控的合成器,音乐创作者可以用超过 10 万种新声音来进行创作。

    NSynth 并不是简单地将几种声音混合在一起,而是将原有声音的声学特性提取出来,合成一种全新的声响,比如 25% 鼓+75% 笛子。

    NSynth Super 把这项技术带到了实际的工具上,让声音的输入和播放更加容易。NSynth Super 的触控萤幕上有 XY 轴,每个象限可以放置一个乐器,创作者可以使用由四种音源生成的全新声音来进行音乐创作,只要在触控萤幕上滑动手指即可。艺术创作需要灵感的触动,这种全新的声音合成在可玩性、创意性上都可以给创作者带来不一样的啓发。

    在实验中,长笛和军鼓的声音合成在一起,所生成的新声音听起来变得尖锐了很多,没有了鼓的沈闷感。研究人员将包含 15 级音高的 16 种原始音源输入到 NSynth 演算法中,最终生成了超过 10 万种新的音色。虽然这个产品目前还处于实验阶段,但演算法和设计是开源的,它本来就起源于 Google 的机器学习专案 Magenta。

    Magenta 专案一直在探索机器学习在艺术创作中的作用,利用演算法来生成歌曲、图像,让艺术家利用这些技术来啓发自己的创作。先前 Magenta 专案写过诗、谱过曲,这次的神经合成器更是把技术真正带到了艺术创作中,除了啓发专业人员外,将艺术创作变得更易上手也是目标之一。

    和 AlphaGo 的发展有点像,机器学习工具在学习完现有乐器之后,下一步就是生成新的声音,然后啓发音乐创作。未来也许真的可以看到这个拥有彩虹萤幕的特殊合成器,我们听到的音乐也将更多样化。