近日完成了世界首例由AI完成编配的校歌

发布者: 林杞权 | 发布时间: 2021-12-1 00:01| 查看数: 59296| 评论数: 0|帖子模式

      首开AI编配校歌之先河 恭祝华东师大70周年校庆
上海纽约大学人工智能音乐实验室(Music X Lab)近日完成了世界首例由AI完成编配的校歌,为华东师范大学送上一份特别的70周年校庆贺礼。

整首校歌以华东师大原校歌的主旋律与和弦为素材,由AI重新编配钢琴伴奏和四个声部曲谱。Music X Lab 近年在人工智能音乐(Music AI)领域科研成果卓著,其中一项很趣的研究是“音乐风格迁移”,即用指定歌曲的风格来改编(编配)当下的创作,是未来“人机协作”的一种作曲新模式。华东师大校歌的编配结合了华语流行(钢琴伴奏检索源自《盛夏的果实》《约定》等)与巴赫的风格(源自巴赫四声部)。从艺术创作的角度,主要目标是让整体风格青春洋溢,蓬勃向上,流露出21世纪现代感,同时富有书卷气息。钢琴演奏部分则由 Music X Lab 的常驻“主力军”——自动演奏钢琴Yamaha Disklavier来实现。

从技术的角度,AI采用的算法包括AccoMontage、 Poly-disentanglement 和 EC2-VAE,均为近两年最前沿的Music AI成果。有关这三个算法的三篇论文,均发表在国际顶级音乐智能会议ISMIR2020和ISMIR2021中。具体而言,系统首先从数据库中检索伴奏乐句,使用动态规划在宏观结构上进行重新组合;第二步,调整伴奏乐句的和弦以匹配主旋律,合成音律和谐、结构合理的伴奏;最后,算法支持指定检索伴奏的来源(例如指定将某一首歌曲的伴奏适配给校歌),从而把握生成伴奏的音乐风格。

在编配过程中,为了解决四部人声数据量短缺问题,团队提前使用了还在“研制过程”中的“秘密武器”——“深度表征套娃递归”,将弦乐四重奏改变适配到四个声部的人声。
如何在大体保留原有旋律的基础上,只通过伴奏编配体现出现代风格,这非常考验团队成员的音乐素养,以及合作中对音乐的理解和共识。这个十人团队中有着很多的“斜杠青年”,有人达到国家一级笛子独奏水平,有人达钢琴十级,有人为美声唱法爱好者……因此,对于这样一个多才多艺的科研团队,这并不成为一个问题,反而还给最后的录制添了彩——最终呈现的校歌小样(Demo)并不是来自合唱团成员,而是由参与此项科研制作的五位团队成员合作献唱。

暑假期间,从华东师大校庆办接手这个项目,当时科研团队的十位成员都在上纽大的Music X Lab里面工作,开学后各奔东西。现在,他们分别从新加坡、美国、荷兰的各所大学,发来对华东师大70周年校庆的衷心祝福,希望通过自己参与创造的一份音乐礼物,为华东师大增添一份融合了科技与艺术的未来希冀。

点击观看视频

*最终呈现的校歌小样(Demo)声音并不是来自合唱团成员,而是由参与此项科研制作的五位团队成员亲自献唱。他们是:

指挥 汪子俞,纽约大学库朗研究所、Poly-Disentangle第一作者
女高音 徐静妍,上海交通大学本科生

女中音 朴子悦,上海交通大学硕士生

男低音 Alan Chao,上海纽约大学本科生

男高音 夏光宇, 实验室主任

幕后团队

赵经纬 (新加坡国立大学博士生,算法构架负责人,AccoMontage第一作者)

姜峻岩(纽约大学库朗研究所博士生,和弦提取算法负责人)

雷沁颖(佐治亚理工学院硕士生,智能界面负责人)

程奕阳(荷兰阿姆斯特丹大学,艺术顾问)

林力蔚(上海纽约大学研究助理,音乐分离算法负责人)









- Happy 70th Anniversary -

求实成就卓越,教育创造未来

上海纽约大学祝华东师范大学

70周年生日快乐!

愿两校携手与共,共创辉煌!
444471F3-8E17-4814-8C3C-E4A4DA456195.jpeg
留言区:
您需要登录后才可以回帖 登录 | 市民注册

本版积分规则

最新评论:(0)
资讯推荐
热点推荐
快速回复 返回顶部 返回列表