Dream Track 实验由 Google DeepMind 最先进的音乐生成模型 Lyria 提供支持,包括 Alec Benjamin、Charlie Puth、Charli XCX、Demi Lovato、John Legend、Papoose、Sia、T-Pain 和 Troye Sivan 在内的9位艺术家选择参与这项实验。
- Dream Track – YouTube Shorts 中的一项实验,旨在通过音乐创作帮助加深艺术家、创作者和粉丝之间的联系。
- 音乐人工智能工具——我们与艺术家、歌曲作者和制作人一起设计的一套工具,以帮助加强他们的创作过程。
为了开发这些项目,我们汇集了来自 Google 各地的技术专家以及众多世界知名艺术家和歌曲作者,共同探索生成音乐技术如何负责任地塑造音乐创作的未来。我们很高兴能够构建新技术,以增强专业音乐家和艺术家社区的工作,并为音乐的未来做出积极贡献。
Lyria 模型简介
音乐包含大量信息——考虑每一秒的每一个节拍、音符和声音和声。当生成长声音序列时,人工智能模型很难保持短语、诗句或扩展段落的音乐连续性。由于音乐通常同时包含多种声音和乐器,因此创作它比演讲要困难得多。
Lyria 模型由 Google DeepMind 构建,擅长生成带有器乐和人声的高质量音乐、执行转换和延续任务,以及让用户对输出的风格和性能进行更细致的控制。
YouTube Shorts 上鼓舞人心的新音乐
我们正在一项名为 Dream Track 的实验中试用 Lyria,该实验旨在测试艺术家与粉丝联系的新方式,并与 YouTube 合作开发。
在实验中,有限的创作者将能够使用 Dream Track 制作独特的配乐,其中包括 Alec Benjamin、Charlie Puth、Charli XCX、Demi Lovato、John Legend、Sia 等艺术家的人工智能生成的声音和音乐风格。 T-Pain、Troye Sivan 和 Papoose。每一位参与的艺术家都与我们合作,并将帮助我们测试和学习塑造人工智能在音乐领域的未来。
Dream Track 用户只需输入主题并从轮播中选择艺术家即可为其短片生成 30 秒的配乐。使用我们的 Lyria 模型,Dream Track 可以按照所选参与艺术家的风格同时生成歌词、背景音乐和 AI 生成的声音。
创作者只需在提示中输入一个想法,然后选择参与实验的歌手,AI就能制作出拥有该歌手特色的原创配乐,供给创作者在视频内容中使用。所有AI生成内容还包括 SynthID 水印嵌入,在人耳听不到的情况下保持可检测性。
借助我们的音乐人工智能工具,用户可以从头开始创建新的音乐或乐器部分,将音频从一种音乐风格或乐器转换为另一种音乐风格或乐器,并创建乐器和声乐伴奏。这项工作借鉴了我们在人工智能和音乐方面的研究和实验历史,我们将在整个开发过程中继续与孵化器参与者一起测试我们的音乐人工智能工具。
Google DeepMind:https://deepmind.google/discover/blog/transforming-the-future-of-music-creation/