Voicebox-Meta旗下语音合成模型
Voicebox是什么?
Voicebox 是由 Meta AI 研究团队开发的一款领先的语音生成模型。Voicebox 能够在六种语言中合成语音,消除瞬态噪声,编辑内容,在语言之间转移音频风格,并生成多样的语音样本。此外,它生成语音的速度比最先进的自回归模型快 20 倍。
产品功能
Voicebox 是一个非自回归的流匹配模型,训练用于在给定音频上下文和文本的情况下填充语音。我们在 60K 小时的数据上训练了一个仅英语的 Voicebox,并在覆盖六种语言(英语、法语、德语、西班牙语、波兰语和葡萄牙语)的 50K 小时的数据上训练了一个多语言版本。
Voicebox 可以通过上下文学习来执行没有明确训练的任务。它比自回归模型更灵活,因为它可以根据过去和未来的上下文进行条件化。我们展示了 Voicebox 可以用于单语和跨语言的零射击文本到语音合成、风格转换、瞬态噪声去除、内容编辑和多样性样本生成。
使用场景
- 瞬态噪声去除:在录制语音时被门铃或狗叫声打断?现在不再需要重新录制语音了。Voicebox 可以像魔术橡皮擦一样用于去除瞬态噪声,通过重新生成噪声污染的语音。
- 内容编辑:Voicebox 也可以帮助纠正错误的单词,而无需让说话者重新录制音频。
- 零射击文本到语音合成:通过上下文学习,Voicebox 可以通过将所需风格的参考音频和要合成的文本作为输入来合成语音。它产生的语音在各个方面都与参考音频保持一致,包括声音、背景噪声和说话风格。
- 跨语言风格转换:Voicebox 不仅可以使用英语音频提示生成英语语音,还可以跨语言转换风格。
数据评估
关于Voicebox-Meta旗下语音合成模型特别声明
本站做视频AI导航网提供的Voicebox-Meta旗下语音合成模型都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由做视频AI导航网实际控制,在2023年11月1日 上午11:30收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,做视频AI导航网不承担任何责任。
相关导航
唱鸭AI是一款一站式解决音乐...
Voice AI:实时语音变声器
Voice AI 是一个免费的实时语...
音虫-AI驱动的音乐编曲和录音软件
音虫是一款面向音乐爱好者和...
网易天音
网易天音2022全新AI创作平台正式上线,海量风格限时限免;一键渲染,点亮你的音乐天赋!
Cleanvoice AI-你的播客智能编辑工具
清理音频或播客中的填充声音...
PocketPod-根据你的兴趣,AI自动生成个性化播客内容
PocketPod是一款智能播客生成应用,允许用户根据自己的...
FakeYou:语音克隆/个性化语音生成工具
FakeYou 是一款功能强大的文...
SongR-在线AI音乐创作工具
SongR是一个由RIFFIT开发的在...
暂无评论...