音乐创作降门槛 AI作曲难过情绪关
2021年9月2日,瑞士洛桑,Nexus管弦乐团演奏贝多芬“第十交响曲”的片断
市民体验智慧钢琴
短短几年,音乐人工智能已成为热门。作曲、伴奏、即兴创作……人工智能在种种场合展示的“才华”令人大开眼界。在刚刚已往的2021年,天下音乐人工智能大会、全球人工智能手艺大会、2021中国音乐科技应用论坛等种种学术活动上,音乐人工智能也成为被提及最多、各人讨论最热烈的话题之一。
未来的音乐会酿成什么样?音乐人工智能会取代人类的艺术创立吗?它会为人类的创立力插上同党,照旧成为终结者?
个案
AI少女学音乐
“小冰学习能力超强”
2020年的结业季,上海音乐学院迎来一位“特殊”的结业生——人工智能少女小冰。小冰不但顺遂结业,还被授予音乐工程系2020届“声誉结业生”称呼。
谈及进军音乐内容创作,前微软互联网工程院副院长、现任小冰公司首席执行官李笛告诉北京青年报记者,差别于此前的诗歌创作、视觉创作、演唱,音乐创尴尬刁难人工智能小冰来说难度更大,“音乐是流媒体,对作品的流通度要求很高。此前小冰在音乐创作中的能力主要是内容的天生,好比演唱,这一次小冰学习的作词、作曲和编曲着实更难。”
怎样让人工智能学会音乐创作呢?小冰团队与上海音乐学院先生告诉北青报记者,让人工智能小冰最先音乐创作的学习历程分三步:
首先,基于小冰已有的音乐创作模子,团队把端口给到上海音乐学院的先生,让先生去听小冰创作的海量音乐作品,并给出系统性的点评。
其次,先生也教会团队程序员基本的乐理知识,包括编曲技巧等,用于优化小冰的创作模子。
最后,小冰一直学习,一直交作业,先生一直给反响。无论“模子”“作业”照旧“反响”,都是一个一直迭代的历程,云云循环往复……
当小冰抵达和人类同砚相似的水平,且趋于稳固,她就结业了。
在上海音乐学院学习时代,小冰接受了来自音工系主任于阳教授和陈世哲先生的“指导”。谈及教学模式,陈世哲先生说,教学生学习音乐创作和教授人工智能有相似之处:“古板教学方法,我们会让学生学习经典的作品、然后摹仿,接下来先生修正、学生再反响。人工智能和通俗学生的学习方法并没有太多差别,我们同样也是给小冰准备了一些数据,小冰学习之后举行创作,先生再来举行评估,来指出那里有问题,继续去修改,一起来完成。”
虽然也有差别。陈世哲评价说“小冰是个学习能力超强的学生”,“教学历程中最大的差别是,小冰的迭代速率是人类完全不可能企及的,好比说一个学生学习、摹仿一首曲子、写出作业、先生修改,这个历程至少要一周时间,可是在对小冰的教学中,我们一口吻放已往几百首甚至更多曲子。”
陈世哲先生先容,判断学生能否顺遂通过结业的审核概略有三条水平线,“最高级创作线是顶尖的盛行歌曲,譬如可以拿到格莱美奖、最佳金曲奖的水平;中心线是创作水准不错的通俗盛行歌曲;基本线是创作广告、电视剧、纪录片配乐等。经由半年的学习,我们以为小冰已经抵达基本线通俗、简朴歌曲的创作能力,一直靠近中心线的创作标准,以是我们给了她声誉结业生的称呼。现实上她的水准已经很靠近中心线,我们也期待小冰继续凭证研究生的标准来入学。”
李笛体现,“关于音乐工业化,人工智能可以在不需要人力加入的情形下,用稳固的质量、极低的本钱、高并发地生产内容,并供应出去,未来在视频、影视配乐等工业的落地都有很大的空间。”
揭秘
音乐人工智能
3秒创作完整歌曲
人工智能的算法进入到艺术创作当中,对古板音乐的创作爆发了重大的影响。2019年,华为公司使用Mate20Pro中的AI,对奥地利作曲家舒伯特未完成的《第八交响曲》剩余曲谱举行了谱写,并在伦敦的一场音乐会上举行了公演。与舒伯特的未完稿差别,贝多芬的《第十交响曲》险些没有任何曲谱,由于病情恶化,贝多芬只画了这部作品的几张草图就溘然离世。创意人工智能首创公司Playform的一群科学家和音乐学家完成了贝多芬未竟的事业,他们经由两年多的起劲,不但让人工智能学习了贝多芬的所有作品,还教会了它贝多芬的创作历程。2021年10月,这台人工智能资助贝多芬续写了《第十交响曲》,并在德国波恩举行首演,吸引了天下的眼光。
“像人类的学习一样,人工智能也是通过语料库学习海量的内容,然后‘创作’新的作品。”面临人工智能超强的学习能力,中央音乐学院音乐人工智能与音乐信息科技系主任、教授李小兵忍不住感伤,“着实是太强了!”2021年,由李小兵作为首席专家申报的《音乐与人工智能协同立异生长理论研究》入选2021年度国家社科基金艺术学重大项目。该课题从音乐学、脑科学、人工智能、盘算机科学等多个领域入手睁开跨学科研究,以“音乐创作与人工智能协同立异生长”“音乐泛起与人工智能协同立异生长”“音乐接受与人工智能协同立异生长”“音乐人工智能哲学——美学”为四个子课题,围绕人、音乐、人工智能三者的相互关系,对音乐与人工智能协同生长中的问题举行深入周全的研究。
随着研究的深入,音乐人工智能在效率上一直精进。李小兵透露,现在人工智能最快3秒就可以创作出一首歌曲。“原来最快是23秒,现在已经缩短到3秒了,3秒不但是作曲,还包括演唱、伴奏、合成,也就是说出来就是一首完整的作品了。”
李小兵和他的团队将人类创作的歌曲和人工智能创作的儿童歌曲放在一起,约请自愿者做过盲测,很难区分出哪首是人工智能创作的。与人类的头脑差别,李小兵用“盲盒”来形容人工智能,“音乐人工智能创作的工具有些与人类相同,有些却不太一样,甚至会让人瞠目结舌。”
看法
“音乐魅力在于演奏家的二度创作”
“人工智能和艺术的连系最难的一块现实上就是音乐。”上海音乐学院音乐工程系主任、作曲家于阳对北青报记者说,“有章可循的容易实现,但音乐是时间的艺术,听觉上给人的感受转变无限,有太多不确定性。受限于手艺水准、数据等因素,现在的音乐人工智能还处于初级阶段,需要进一步探索和研究。”
李小兵也以为,与文本、语言相比,音乐的维度要多许多,有音高、节奏、强弱、情绪等,也要重大得多,因此音乐人工智能需要更大的模子和算力,也要最顶尖的科学家和艺术家携手。只管人工智能作曲可以通过学习海量的作品,模拟作曲家的创作通过图灵测试,在演奏方面也可以做到精准无误,但业内人士普遍以为,就情绪来说,这些作品与人类创作的作品照旧有很大区别的。
“这就是音乐的魅力所在。一首钢琴曲,十个演奏家弹出来是十种完全差别的感受,这内里就有演奏家的二度创作。这种感受的差别是机械取代不了的。”于阳说。
只管不可取代人类最焦点的创立力,但现在人工智能已经可以辅助人类做许多事情,尤其是大宗重复性、基础性的事情。
“20年前,我们都是在五线谱上写工具,现在大部分作曲家都是用电脑软件创作了,这现实上就是人工智能的一种形式。”身为作曲家的于阳体现,写作完成后,软件还能自动天生演奏,作曲家可以随时在上面修改、调解,“人工智能大大提高了创作效率。”
李小兵也以为,“若是要创作高水平的音乐,如影戏配乐或是一线的、能打榜的盛行歌曲,人工智能尚有很长的路要走,但一些配景音乐,人工智能的创作已经能够切合人们的浏览需求。”
随着音乐人工智能的深入生长,未来的音乐会有排山倒海的转变。在李小兵看来,未来音乐可能不止3D音乐、机械人主持、交互多媒体、人工智能伴奏、虚拟现实、机械人指挥、机械人演奏、机械人演唱等,更有可能会泛起新形态,“就像照相机泛起以后,迫使美术界爆发了特殊大的改变,泛起了一批照相机不可取代的大艺术家,随着音乐人工智能研究的深入,未来的音乐创作越发弥足珍贵,也一定会降生让人意想不到的新的音乐形态。”
本版文/本报记者 田婉婷 张知依
统筹/刘江华 供图/视觉中国
潮流档案
AI通过自身强盛的数字处置惩罚能力兼顾歌曲从制作到演唱的全流程,实现化繁为简,在短时间内完成音乐作品创作。通过算法学习和“实战”训练来学习怎样写歌,非音乐事情者也可以借助这种手艺创作出属于自己唯一无二的曲子。
行业结构
科技巨头投资各有重点
资源早就意识到了音乐人工智能的商业价值,人工智能科技巨头都在起劲结构:早在2016年,字节跳动就建设了AI Lab,对AI举行深入研究;网易云音乐在2020年战略投资了AI音乐公司AIVA,重点放在了AI辅助音乐创作领域;腾讯AI Lab推出了AI数字人“艾灵”,可以通过用户提供的要害词自动天生歌词并演唱;字节跳动开发的基于Tacotron声学模子和WaveRNN神经网络声码器的中文歌声合成(SVS)系统——ByteSing、微软研究院宣布的AI音乐开源项目Muzic等都在试图证实人工智能可以完成音乐的整个生产历程。
学科储备
首批音乐人工智能博士今年结业
各大高校也在迅速推进音乐人工智能的研究和应用。中央音乐学院、上海音乐学院、四川音乐学院等高校纷纷开设音乐人工智能专业。2022年7月,中央音乐学院首批音乐人工智能的博士就要结业了,他们成为了各大互联网公司争抢的人才。“由于社会对音乐人工智能的人才需求量重大,现在大的互联网公司用的大部分都是从声学专业转过来的,可能不是专门学习音乐人工智能专业的,以是说现在我们这个专业的博士结业生很是抢手。”李小兵说。
“通常情形下,搞音乐的人不懂科技,搞科技的人不懂音乐,音乐人工智能是个交织领域,我们现在做的事情就是把这两方面连系起来。”于阳透露,上海音乐学院的人工智能博士接纳双导师制,音乐和手艺的导师各一名。“音乐人工智能未来可期,现在要跨出这一步很主要。但现在人才缺口照旧很大的。”
大事记
2019年
深圳交响乐团演奏了全球首部AI交响变奏曲《我和我的祖国》,这也是该曲目的天下首演。
2020年7月9日
由微软小冰、小米小爱、百度小度、Bilibili泠鸢四位人工智能机械人合唱的主题曲《智联家园》亮相 2020年天下人工智能大会开幕式。
2021年10月9日
人工智能续写的贝多芬《第十交响曲》在德国宣布,引发天下关注。
谈论
- 谈论加载中...