不久前，一段美国女歌星霉霉说中文的视频火了，大家都惊讶于霉霉什么时候中文这么标准了，并且口型还能对上的时候，才发现这是AI配音的效果。
原来这是B站UP主“”发布的一条题为“这才是没有译制片腔调的翻译”的AI配音视频。
这条视频背后使用到的 AI 生成工具 ——也带火了一些列AI配音短视频。作者表示，视频制作中有三个重要的因素：掌握地道的口语翻译、语音克隆和替换嘴型，每个步骤都要做好。
我们在制作一些视频的时候，如果不想用自己的声音，或者缺乏配音的条件，也可以使用AI配音的方法来解决，今天给大家介绍几款各有特色的AI视频翻译+配音工具吧。
01
（Video by Labs）
是一个AI视频和数字人生成网站，9月7日上线了Video （视频翻译）功能后，在X上迅速走红。
有国外网友使用的即时配音+口型同步功能，生成了Elon Mask用日语、西班牙语、德语等8种语言的讲话片段。
此外，还有梅西和扎克伯格等人用多种外语讲话的逼真片段在社交媒体疯传。
目前，的视频翻译功能支持14种语言，依托的是的声音处理技术。不过，用户必须上传时长居于30秒至5分钟之间的视频，否则无法翻译和生成。
的创作者包月套餐最低为每月29美元，可以制作多个视频，每个视频最长5分钟。
02
微软文字转语音工具
这款工具是最多视频博主使用的一个工具，只需要输入配音文本，然后调整左侧的4个参数，就能轻松的将文本内容转化为AI配音。使用起来十分简单，这也是为什么很多视频博主都喜欢使用这款工具的原因。
03
这个网站除了能够进行AI配音之外，还在支持对AI配音生成的音轨进行一些编辑，比如增加环境音，混响降噪等效果，经过处理的配音效果真的可以以假乱真。
04
这是一个无需账号注册，全程免费商用的网站，对于不想麻烦的用户来说十分友好。
输入文字后，可以根据字句的特点，对特定的语音进行标记，这样能够使得AI配音更有抑扬顿挫的效果，听起来更像真人配音，效果非常好。
05
AI
（）
这是近期发布的一款产品，结合了的多语言语音合成、声音克隆、文本和音频处理技术，可以把任意一段音频或者视频，快速翻译为包括中文、葡萄牙语、日语等在内的29种语言，同时保留原语音者的音色特征和情感。
访问AI 官网，选择 a New Dub创建一个新项目，为项目添加一个名称， 可以手动选择或者让系统自行检测， 选择想要输出的目标语言即可。
除了上传视频外，还可以粘贴、、X（）、Vimeo，以及任意视频的链接。设置完成后，点击最下方的按钮，开始音频克隆，完成后可以预览看看效果，然后再下载。
此外，在高级选项中还可以选择原视频中的人物数量、视频的质量，以及其他设置。
需要注意的是，在未登录和注册的情况下，AI 仅支持翻译一个最长为1分钟的视频，免费体验额度用完即需要付费使用。
06
（）
由初创公司开发，这家公司成立于2021年，已获得红杉资本、联合创始人Kevin 和Mike ，以及前产品设计副总裁Julie Zhuo的投资。
目前支持28种语言，在语言翻译方面使用了的GPT-4模型，并且可以识别讲话人的唇部动作。
的创始人Misra和表示，他们早就想在配音翻译中加入口型匹配功能，但没想到会这么快实现。
Misra说：“我们最初认为这项技术需要10年时间才能够实现，但现在的技术发展实在太快了，几乎每个月甚至每周都有新东西出现。”
相关文章
