大数跨境

古腾堡计划利用合成语音免费上线5000部有声读物

古腾堡计划利用合成语音免费上线5000部有声读物 海外洞察
2023-09-19
0
导读:开源图书库古腾堡项目已在一夜之间利用合成语音将数千部作品转化为有声书,现已上线

开放书籍库 Project Gutenberg 已利用合成语音技术,在极短时间内将数千部作品转化为有声书。目前可在多个服务上下载或流媒体播放。这些作品的选择颇具特色(正如该档案库整体风格一般),但这仍然是文学无障碍访问的有力证明。

通过传统旁白制作有声书,即使在最佳情况下也需要相当长的时间,而且需要为朗读者支付报酬,还涉及编辑和出版等问题。对于许多作品来说,制作有声书在经济上并不划算,这意味着许多较旧且较为冷门的作品对于偏好这种格式的读者来说仍然难以获取。

Project Gutenberg 当然致力于以尽可能多的格式推广公有领域文学作品,填补这一空白可能早已在他们的待办事项列表中。但直到他们与麻省理工学院(MIT)和微软合作后,才具备运用“代码魔法”的能力,利用人工智能生成的语音让这些书籍焕发新生。

PG 档案库的问题在于,尽管其价值巨大,但文件格式并不统一。这些文件来自各种来源,通常经过错误频发的光学字符识别(OCR)过程,并且经常由志愿者进行不完美的编辑和校对。即使它们完美无瑕,也不意味着机器能够轻松读取其格式:最终可能会出现朗读页码、脚注和其他琐碎内容的情况。

“Project Gutenberg 中的每本电子书都采用各自独特的 HTML 格式,其中包含大量不适合朗读的内容,如表格、目录、索引、页码等。该项目最困难的部分是提取出适合朗读的优质文本。”项目联合负责人 Mark Hamilton 解释道,他隶属于微软和麻省理工学院。

为解决这一问题,他们设计了一套系统,遍历档案库并识别出格式相似的书籍文件,然后确定哪些集群最适合自动朗读。

这一首批次的作品由于选择范围相对受限,显得颇为独特:例如,只有一部狄更斯的作品(而且是未完成的《埃德温·德鲁德之谜》),却有多达十二卷类似《笔记与问答,第176期,1853年3月12日,供文人、艺术家、古物学家、谱系学家等交流的媒介》的书籍。

“我们根据自动化解析器能够合理处理的内容来选择首批次的书籍,”Hamilton 继续说道,“尽管如此,一些重要的优质作品还是被遗漏了。现在首批次已经发布,我们正在努力完善系统,以便在未来的版本中更接近完整的 6 万本书籍。”

就叙述本身而言,团队整合了多种机器学习和合成语音工具,这些工具在过去几年中得到了改进并变得更加易用。几年前,人们显然意识到自动有声书制作即将实现,而这一愿景确实已经到来——并且实现了规模化生产。

WellSaid 旨在使听起来自然的合成语音成为真实人声的可信替代方案

以下是具体方法:该项目的论文描述了他们如何让生成的有声书更具吸引力的方法:

为了对文本进行富有情感的朗读,我们使用自动说话人和情感推断系统,根据上下文动态改变朗读的音色和语调。这使得包含多角色和情感对话的段落更加生动有趣。为此,我们首先将文本分割为旁白和对话部分,并识别每个对话部分的说话人。然后,我们以自监督的方式预测每段对话的情感。最后,我们为旁白和角色对话分配不同的声音和情感,使用的是基于多风格和上下文的神经文本转语音模型。

前约 5,000 本书可在 Spotify、Apple Podcasts 和 Internet Archive 上免费收听,用于创建它们的代码正在 GitHub 上进行文档整理。

【声明】内容源于网络
0
0
海外洞察
海外资讯洞察,电商,AI
内容 14179
粉丝 0
海外洞察 海外资讯洞察,电商,AI
总阅读975
粉丝0
内容14.2k