ElevenLabs这家以病毒式传播的AI驱动合成语音创建平台,今日宣布其平台结束测试阶段,并支持超过30种语言。
ElevenLabs 表示,利用其自主研发的全新 AI 模型,其工具现在能够自动识别包括韩语、荷兰语和越南语在内的多种语言,并生成“情感丰富”的语音。
结合这一新模型,ElevenLabs 的客户可以利用平台的语音克隆工具,在无需先输入文本的情况下,用近 30 种语言进行对话。
ElevenLabs 首席执行官兼联合创始人 Mati Staniszewski 在一份声明中表示:“ElevenLabs 的创立源于一个梦想,即让所有内容在任何语言和任何声音中都能被普遍访问。随着此次发布,我们离实现这一梦想又近了一步,并使人类质量的 AI 语音能够在每种方言中可用。我们的文本转语音生成工具有助于创造公平的竞争环境,并为所有创作者带来高品质的 spoken audio 能力。”
由曾在Palantir工作的Staniszewski与其童年好友、前Google员工Piotr Dabkowski共同创立的ElevenLabs,在过去几个月里因好与令人憎恶的原因而登上头条;受Staniszewski和Dabkowski在波兰成长期间观看的美国电影平庸配音的启发,两人着手设计一个能做得更好的平台——当然,使用的是AI技术。
ElevenLabs 于 1 月下旬推出测试版,并迅速走红——这得益于其生成语音的高质量和慷慨的免费套餐。但正如前文所述,公众舆论并非始终积极——尤其是当不良分子利用该平台谋取私利时。
以阴谋论内容闻名的臭名昭著的网络论坛4chan使用了ElevenLabs的工具来分享模仿演员艾玛·沃特森等名人的仇恨言论;此外,《The Verge》的James Vincent能够利用ElevenLabs在几秒钟内克隆目标人物的声音,生成包含从暴力威胁到种族主义和跨性别恐惧症表达等各种内容的音频样本。
对此,ElevenLabs 表示将引入一系列新的安全措施,例如将语音克隆功能限制为付费账户,并提供新的 AI 检测工具。
然而,ElevenLabs 尚未应对围绕其平台及其他类似平台酝酿的另一场争议:它们对配音行业构成的威胁。
《主板》杂志报道,配音演员越来越被要求放弃对自己声音的权利,以便客户使用人工智能生成合成版本,这些版本最终可能取代他们。与此同时,《纽约时报》看到的内部邮件显示,全球最大的游戏发行商之一动视暴雪正在开发用于AI辅助“语音克隆”的工具。
看来 ElevenLabs 认为这是事物发展的自然进程,它吹嘘自己与 Storytel 等出版商;TheSoul Publishing 和 MNTN 等媒体平台合作制作有声书和广播内容;以及 Embark Studios 和 Paradox Interactive 等出版商合作制作电子游戏。(Storytel 和 TheSoul Publishing 是战略投资者。)该公司声称,其在创意、娱乐和出版领域拥有超过 100 万注册用户,已创建了相当于 10 年音量的音频内容。
ElevenLabs,这家最近从包括 Andreessen Horowitz 和 DeepMind 联合创始人 Mustafa Suleyman 在内的投资者那里筹集了 1900 万美元,估值达 9.9 亿美元,计划最终将其 AI 模型扩展到语音配音领域——追随 Papercup 和 Deepdub 等初创企业的脚步,并构建其所谓的“能够将情感和语调从一种语言转移到另一种语言的基础”。
除此之外,ElevenLabs表示它计划引入一种机制,允许用户在平台上共享声音,尽管细节仍然模糊不清。

