美国HeyGen Labs推出人工智能视频翻译新工具 支持汉语等多种语言

来源:邮电设计技术杂志社 | 2023-09-15 17:19:08

  美国科技公司HeyGen Labs近日推出了一款利用AI人工智能可以自动将视频翻译和配音成其他语言的新工具,这个神经网络可以复制说话者的声音的音色,并根据生成的音轨调整嘴唇的运动。

  目前,HeyGen Labs的视频翻译功能处于beta测试阶段。通过这个功能,用户可以翻译和自动配音短视频片段。它支持英语、西班牙语、法语、汉语、德语、意大利语、波兰语、葡萄牙语、荷兰语、印地语或日语。尽管俄语没有出现在官方列表中,但该神经网络也可以处理它。

  据悉,在利用AI技术翻译过程中,HeyGen会根据本地人的语言表达方式来自适应语言,从而使翻译更加自然。

  此外,神经网络会复制原始声音的音色和语调,使其听起来就像是一个人最初在目标语言上说话。嘴唇的运动也会与生成的音频轨道相匹配。因此,互联网用户开始将流行的表情包和笑话翻译成外语。

相关阅读

每日精选