谷歌今天发布了一篇新闻稿,正式介绍了他们推出的名为Translatotron 3的新型人工智能模型。这个模型无需任何并行语音数据,可以实现语音对语音的同声传译翻译
谷歌在2019年推出了Translatotron S2ST系统,并在2021年7月推出了第二个版本。在2023年5月27日发布的一篇论文中,谷歌宣布正在部署新的方法,用于训练Translatotron 3
研究人员称,Translatotron 2 已经提供了卓越的翻译质量、语音鲁棒性(Robust)和语音自然度,而 Translatotron 3 实现“第一个完全无监督直接语音到语音翻译的端对端模型”。
传统上的S2ST通过自动语音识别+机器翻译+文本到语音合成的级联方法来解决,但Translatotron 3采用了一种新颖的端对端架构,直接将源语言语音映射到目标语言,而不依赖中间文本表示
Translatotron 3 模型还可用于创建帮助有语言障碍的人的工具,或者开发更具吸引力和有效性的个性化语言学习工具。
需要重写的内容是:来源:IT之家
以上是AI同声传译新突破,谷歌发布Translatotron 3模型:可绕过文本转换步骤的详细内容。更多信息请关注PHP中文网其他相关文章!