据国际文传电讯 9月15日报道,美国科技公司HeyGen Labs近日推出了一款利用AI人工智能可以自动将视频翻译和配音成其他语言的新工具,这个神经网络可以复制说话者的声音的音色,并根据生成的音轨调整嘴唇的运动。
图片来自:国际文传电讯
目前,HeyGen Labs的视频翻译功能处于beta测试阶段。通过这个功能,用户可以翻译和自动配音短视频片段。它支持英语、西班牙语、法语、汉语、德语、意大利语、波兰语、葡萄牙语、荷兰语、印地语或日语。尽管俄语没有出现在官方列表中,但该神经网络也可以处理它。
据悉,在利用AI技术翻译过程中,HeyGen会根据本地人的语言表达方式来自适应语言,从而使翻译更加自然。此外,神经网络会复制原始声音的音色和语调,使其听起来就像是一个人最初在目标语言上说话。嘴唇的运动也会与生成的音频轨道相匹配。因此,互联网用户开始将流行的表情包和笑话翻译成外语。
(编译:宏偉)