谷歌推出全能扒谱AI:只要听一遍歌曲,钢琴小提琴的乐谱全有了

晓查 发自 凹非寺
量子位 报道 | 公众号 QbitAI
听一遍曲子,就能知道乐谱,还能马上演奏,而且还掌握“十八般乐器”,钢琴、小提琴、吉他等都不在话下 。
这就不是人类音乐大师,而是 谷歌推出的“多任务多音轨”音乐转音符模型 MT3 。
首先需要解释一下什么是多任务多音轨 。
通常一首曲子是有多种乐器合奏而来,每个乐曲就是一个音轨,而多任务就是同时将不同音轨的乐谱同时还原出来 。
还原后的多音轨听起来是这样的:
听起来是不是很像原版演奏?事实上,谷歌MT3在还原多音轨乐谱这件事上,达到了SOTA的结果 。
【谷歌推出全能扒谱AI:只要听一遍歌曲,钢琴小提琴的乐谱全有了】谷歌已将该论文投给ICLR 2022 。

    推荐阅读