美国专注於研究人工智慧和深度学习技术开发自然语音的软体公司 ElevenLabs 推出一款全自动化的 AI 配音和影片翻译工具「AI Dubbing & Video Translator」,可以将你提供的影片翻译成 29 种语言。YouTube、TikTok、推特(现 X)、其他 URL 都可以帮你翻译,只需要等待几十秒到几分钟就可以获得一段影片。
超方便!全自动化进行 AI 配音和影片翻译的工具 AI Dubbing & Video Translator
ElevenLabs 推出一款用语音翻译、语音辨识和录音配音,只需要几分钟就可以将你的内容翻译成 29 种语言的工具「AI Dubbing & Video Translator」。
!想要体验 AI Dubbing & Video Translator 的朋友请点击这里!
AI 影片翻译配音
AI Dubbing & Video Translator 可以将你提供的影片里的声音从一种语言转换成另一种语言,同时还保持声音特徵不变。操作简单,你只需要「上传想要翻译的影片」并「选择想要翻译的语言」,它就会自动用 AI 将剩下的翻译和配音工作完成。
这麽一来不管你是在 YouTube、TikTok、推特(现 X) 或其他平台上有听不懂的影片你都可以使用 AI Dubbing 来帮你翻译。这边提供一段使用 AI Dubbing 来自动翻译 Apple Vision Pro 导览的 YouTube 影片。
我们使用 Apple 的 Vision Pro 影片为例,原本的是全英文的内容:
这是「AI Dubbing & Video Translator」上传影片後,将英文翻成中文的结果,免费版点数不够,这边用一分钟做范例,翻译的效果还算不错:
我们也用自己的影片交给 AI Dubbing & Video Translator翻译做测试,原始影片:
AI Dubbing & Video Translator 翻译的效果,转档的速度很快,中翻英的部分在内容辨识不如英文准确(而且无法修改内容),而且免费版我觉得声音不那麽像本尊:
如果订阅 11 元美金的 Creator版本的话就会有内容校正检查的功能,音调也会模仿原始声调:
ElevenLabs 文本转语音工具
ElevenLabs 本身是专注於利用人工智慧和深度学习技术来开发自然语音合成和文字转语音的美国软体公司,所以它们的网站还提供文字转语音的工具,这边也放一段「电脑王阿达主要分享科技新知、3C产品开箱评测、App分享等内容,请按赞并设为最爱才不会遗漏最新资讯。」的文字转语音范例。ElevenLabs 本身还有许多工具可以使用,大家可以自行去体验看看。想要体验的朋友可以点击!这里!前往 ElevenLabs 的网站。
效果可以播放下面的范例来试试,挺有趣的:
https://www.kocpc.com.tw/wp-content/uploads/2024/01/1706204487-302f506048dc11ae810ef56e85aca7c1.mp3
我也让用自己的一段录音後输入文字让 AI模仿,大家可以听听看,我是觉得效果很不错:
https://www.kocpc.com.tw/wp-content/uploads/2024/01/1706371167-947462fa1eece47ea1799cb7112ce4c1.mp3
当然也可以用我的语调念英文:
https://www.kocpc.com.tw/wp-content/uploads/2024/01/1706373575-c540a16e53d2decbed222d8f2294d200.mp3
大家使用的时候还是要注意 AI Dubbing & Video Translator 有免费额度的使用限制,超过的话要等 30 天才能重新免费使用。不然也可以选择支付每个月 1 块美金/11 块美金来获得更多权限,价格不算贵(不过这价格是首月的费用,要注意一下)。
要认真使用的朋友可以选择每个月 99 块美金/330 块美金来获得更多的特权。
我们之前写过的 AI 打造自己造型的虚拟主播,支援多国语言翻译的 HeyGen 的技术也是由 ElevenLabs 提供。
我们也测试了用 HeyGen 来翻译同一段影片,老实说 HeyGen 效果明显比较好,而且连嘴型也对的上:
整体使用下来 AI Dubbing & Video Translator 这套工具在声音模仿与念稿的效果不错,影片翻译部分外语翻中文效果优异,但中翻英效果就没有 HeyGen 好(虽然 HeyGen 也是用这一间的服务,但中文语音辨识 HeyGen较强),不过优点是 AI Dubbing & Video Translator 价格远比 HeyGen便宜而且免费点数也可以做几支短片,如果是一般的声音模仿或短片制作的话,AI Dubbing & Video Translator是还不错的选择。