You need to enable JavaScript to run this app.

技术与艺术碰撞火花,火山引擎如何玩转AI音乐?

最近更新时间2023.01.28 14:20:01

首次发布时间2023.01.28 14:20:01

如今,伴随AI技术的高速发展,有个话题会时常被热议:人类如何与AI 协作创造更大价值?

9月2日,火山引擎AI作曲的中秋主题单曲《明月颂》在抖音上线。纯熟的古风词曲,明亮轻快的演唱,制作中还夹带些顽皮的小心思。与纯人工或者AI创作不同,火山引擎尝试以AI为主、人工为辅,通过人与机器合作完成一首歌的词曲创作、编曲到演唱的全过程。《明月颂》的创作过程,是先提供了一些关于思念的词汇和韵脚,由AI生成第一版歌词,再经过几轮修改,将古风、晦涩的词藻进行更通俗的表达,最终的娃娃音效果也由AI演唱。

AI为主、人工为辅:或为艺术创作之道

一直以来,在音乐等艺术创造性行业中有个固定发展方向:AI替代人完成很多基础、重复、启发性的工作,人则负责完善创意部分。从火山引擎AI歌曲创作流程图中也能看到,一首歌曲的制作被拆分为词曲动机诞生、完整词曲生成、歌声合成、编曲混音等不同环节,人更多参与创意环节。
火山引擎AI歌曲创作流程图

一首歌源于最初的创作动机,动机也是启发作品的灵感来源。实践中,人通过确定主题、风格、关键词启发机器;机器则通过学习生成完整的歌词、旋律,甚至完成演唱。根据歌曲的需要,人和AI在不同环节的参与度可以灵活调整。例如与虚拟偶像团体A-SOUL成员向晚合作的《晚笑话》中,我们看到的并不是简单的取代,而是不同维度创意的交织与迸发。
《晚笑话》

歌曲由向晚作词与演唱,AI根据A-SOUL的风格,创作的旋律结合了二次元、R&B、说唱的元素;同时在伴唱中,AI小姐姐温柔的声线搭配上晚晚酷炫的嗓音,让整首歌曲的表现力更加丰富。

人工的辅助则让AI锦上添花。火山引擎团队背后的音乐专家们,则根据自身在创作实践中积累的作曲经验,为AI拟定规则,在音符密度、跳跃程度、音符跨度、声音厚度等更高层次提升AI的学习和创作能力。合作中,AI既稳定可控又具备个性,和人类创作相互启发。机器学习与专业音乐人结合的创作算法,将人类的智慧赋予AI,又让AI的输出更具备人类的情感和思考能力。

被AI激发的神奇创意层出不穷

伴随AI激发更多神奇创意,人与AI相互配合的优势也得到充分展现。2022年大年初一,CCTV-17 频道黄金时段播出了新年特别节目《年画画年》,其中的配乐就是由火山引擎AI团队根据节目的“年画”主题操刀创作的。

年画的绘制需要耐心,需要放慢速度,背景音乐的选择要与这个过程相吻合。AI在吸收了人类创作者的灵感和情感之后,通过快速计算为团队探路、试错,最后的成品找到了很好的平衡点。背景音乐与主持人讲述的年画故事相得益彰,又不会喧宾夺主,让观众能一直沉浸在节目的讲述中。
《年画画年》

其实早在2021年的程序员节,央视纪录片《码农的异想世界》的同名主题歌曲也是AI提供词曲编唱的。这是一首偏电音风格的歌曲,主歌的男生说唱和副歌的电音女生都由AI实现。
《码农的异想世界》

两个与央视合作的案例中,AI都包办了词曲编唱整条链路。这种合作模式未来有着广阔的应用前景:

首先,AI创作可以生成没有版权纠纷的音乐。《年画画年》原定配乐无法确定版权来源,无法获得正式的授权,在这种情况下导演开始商讨用 AI 技术生成配乐的可能性。在为视频、节目选择配乐时,往往付出了极高的沟通成本,也未必能够解决问题;但如果选择让AI来发挥,版权问题就无需过多担心了,还能积累出自己的原创曲库。

其次,AI创作可以灵活适应不同场景的需求。AI团队可以通过多个维度去控制音乐生成,例如和声、节奏、速度、旋律起伏、配器等,让成品符合配乐的需求,而且效率极高。像《年画画年》这么复杂且高质量的配乐,AI仅仅两天时间便完成了,导演组在初次听到曲子时评价:“我们都震惊了”、“我认为我们不会提出修改意见”。

第三,AI创作可以方便地与多媒体业务结合。优质的AI创作可以达到速度和质量的平衡点,让技术真正实用起来。就像把古诗创作成儿歌一样,未来AI音乐也可以应用于视频、有声小说、游戏等场景的配乐需求,服务于更多受用户喜爱并有意义的项目。

AI的存在,使人类创意工作的可能性被极大地拓展了。一种稳定、可控,且能和人类互相启发的共创模式,很可能是未来解决AI和人类相处之道的一种默认选择。未来,火山引擎会持续探索AI创作的可能性,持续为用户体验和业务增长注入创新势能。