在一首使用AI深度伪造Drake和The Weeknd声音的歌曲病毒式传播后被下架之际,Grimes在推特上表示愿意将收入的50%分给任何希望在AI生成歌曲中使用她声音的人。一周后,Grimes推出了开源AI语音软件Elf.Tech,允许艺术家复制她的声音并赚取一半版税。
尽管许多音乐人感到被AI威胁,这位加拿大电子音乐艺术家(与Elon Musk共同抚养孩子)正加倍坚持她对使用AI音乐工具的态度。
由Grimes经理Daouda Leonard联合创立的音乐技术工作室CreateSafe,今天正式推出基于生成式AI的平台Triniti免费开放测试版。Triniti使艺术家能够创建AI语音克隆、生成文本到音频样本、向聊天机器人询问音乐行业问题、变现创作成果并管理音乐知识产权。
Elf.Tech是CreateSafe Triniti平台的原型,已创建超过1,000首复制Grimes声音的歌曲。Grimes最近加入了CreateSafe顾问委员会。
CreateSafe透露其融资额为460万美元。种子轮由Polychain Capital领投,Kendrick Lamar经纪人Anthony Saleh、Paris Hilton创立的11:11 Media、Unified Music Group、Crush Ventures、MoonPay、Chaac Ventures以及Bernstein Private Wealth Management副总裁Dan Weisman参与投资。新资金将用于进一步开发Triniti平台。
CreateSafe将Triniti称为“艺术智能”平台,旨在赋能创作者制作音乐。“它不会完全由AI驱动,用户可通过界面操作并自己制作音乐,”Leonard在TechCrunch演示中表示,“我们希望每个人都能拥有自己的AI,以新方式协作和扩展自身。”
Triniti利用定制版RVC(真实语音克隆)模型及OpenAI ChatGPT作为虚拟伴侣,使用Stable Diffusion生成专辑封面图像。CreateSafe还在构建基于MusicGen的音乐模型,专注于传统DSP等音频技术。
“我们的目标不是用计算机取代人类,而是赋予人类能与AI协作的工具,创造全新体验……我们不想加剧当前音乐领域的大规模欺诈行为,”Leonard补充道。据审计公司Beatdapp估计,2022年至少有10%的流媒体活动存在欺诈行为。
语音转换和克隆是Triniti最引人注目的AI工具。歌手可录制声音并用不同模式训练AI,获得数字语音克隆及“语音相似性”证书,从而设定声音授权条件。使用这些声音创建的歌曲可直接从平台分发、管理和变现。
许可是关键环节,因为围绕音乐行业中语音AI的辩论多集中在版权保护上。“提供许可框架和分发渠道是在建立对数字克隆体所有权时保护声音的方式……若其他平台未经授权使用你的声音,你可以发出下架通知,”Leonard说。
尽管Grimes是首位使用Triniti语音克隆技术的艺术家,但她不会是最后一个。该平台有30位艺术家组成的团队,计划在2024年发布数字语音克隆体供成员使用。Leonard称这些人是“知名、具有传奇色彩的艺术家”,并表示希望从真正相信这项技术的艺术家和唱片公司开始,展示模型训练的伦理使用方式及获得IPO持有人同意的合意使用方法。
Triniti还提供AI采样生成器,创作者输入风格或氛围描述(如“朗朗上口却又令人着迷的情歌”),即可生成四个带专辑封面的音轨。此外,虚拟助手可回答“唱片公司如何赚钱”或“怎样出名”等问题。管理工具则利用LLM自动化工作流程,帮助整理合同、创建发票、添加客户及组织项目。
目前,任何人都可免费访问Grimes的AI语音技术、音频样本和聊天功能。语音克隆、许可、分发和管理应用需申请批准后使用。公司计划推出订阅模式,年费在99美元至150美元之间。未来还将推出编辑工具、MIDI处理视觉功能及iOS和Android应用程序。
“我为团队能如此迅速执行这一愿景感到骄傲,”Grimes在声明中说,“艺术行业产生巨额收入,但艺术家分得很少。对我们来说,第一步是消除将资源送到艺术家手中的摩擦。”
从DrakeGPT到Infinite Grimes,AI生成的音乐引发共鸣

