@ 2018.07.10 , 15:00
13

MIT开发出能分离不同乐器声音的应用

MIT开发出能分离不同乐器声音的应用
mit|youtube

当你制作甜品的时候,将淀粉、糖、鸡蛋等材料混合在一起,进行烘烤。这一过程和演奏音乐有些相像,不同的乐器,不同的声音特质,按照某种既定规则交织在一起。当演奏过程被记录到音频文件中,就像是蛋糕烘烤出炉,等待人们的品尝。没有办法逆转这一过程,将淀粉和糖从中析出还原。所以,也没有办法将音频文件中的不同乐器声单独摘出来……按道理是的吧?

麻省理工学院计算机科学与人工智能实验室的研究人员开发出了一款应用程序,利用它可以识别出合奏演出视频/音频文件中不同的乐器声。当它生成视频中出现过的乐器列表之后,用户只需要点击选中特定的乐器,就能直接获取视频中该乐器的单独演奏的效果。

这可不像说起来那么轻松,实际上,之前还没有哪种傻瓜式应用程序能做到这一点。显出特定的乐器声音,比消除背景杂音凸显人类对话声音的操作要难得多,因为乐器演奏的时候,不同声音合并在一条音轨上,音调音节的起伏彼此相合。而之前的音频处理技术,通过频率之类的参数,来消抹或截取相关声音,需要调音师极多的精细操作。

他们的神经网络深度学习系统对时长60小时的各种音乐家演奏视频进行分析训练。最终,它能够识别出20多种不同的乐器,然后自动将每种乐器的声音隔离出来。用户只需要点击他们想要听到的乐器,就能单独得到一段音频。以往的音响工程师要想实现这一效果,通常需要数个小时的处理和调整。

CSAIL的研究人员指出,随着神经网络系统进一步升级,它将能分辨同一族乐器之间的差异。未来,它可以被用于混音处理和重新灌制唱片,哪怕母带出现损毁也没有关系。具体的应用方向,比如说在演出完成录制后,还可以提高小号的声音,同时降低钢琴的音量以改善整体混音效果。或者,对还处于学习阶段的音乐家来说,用该软件可以将著名乐队中特定的演奏者的演奏效果提取出来加以揣摩学习。

该软件还有可能彻底改变DJ行业,或许这也是麻省理工学院不想此时就推广应用程序的原因。但是,操作如此便捷的音频处理程序是每位调音师和混音DJ都想放到自己工具箱中的强大工具。

本文译自 gizmodo,由译者 majer 基于创作共用协议(BY-NC)发布。


给这篇稿打赏,让译者更有动力 !
支付宝打赏 [x]
您的大名: 打赏金额:

4.5
赞一个 (7)

+1

  1. 3887823

    科学技术是第一生产力

  2. 猞猁
    @1 week ago
    3887855

    希望早日投入市场

  3. 灾星
    @1 week ago
    3887863

    鸡尾酒会问题

  4. 躁郁狂
    @1 week ago
    3887892

    厉害。感觉中国的那些技术老想装的厉害,但是就是让人感觉平庸

  5. 3887920

    这个牛逼

  6. 双黄蛋
    @1 week ago
    3888153

    期待开源!

  7. 大爷
    @1 week ago
    3888166

    那么在哪里可以下到呢

  8. 3888176

    最后,神经网络可以自己学会吹号了。一台电脑就是一个交响乐队。再学会自己作曲……..

  9. 123啊
    @1 week ago
    3888282

    mit要是再这么点错技能树,估计第一工科院校可以让贤给斯坦福了

  10. 一公车段子
    @1 week ago
    3888378

    @123啊: 这都是学院仿生人的前置科技啊,路数没错!

  11. 小斌斌_BT
    @1 week ago
    3888487

    求购!!

  12. Ronald
    @1 week ago
    3888602

    麻人希

  13. 3889933

    不错不错,原来这个功能现在才可以堪用啊。。。我还以为那些昂贵的音乐制作软件早都有了。。

发表评论


24H最赞