谷歌推出AI视频对口型技术:根据翻译语言改变人物说话方式,但不开放使用
在 2023 I / O 开发者大会上,谷歌宣布正在开发一项名为 Universal Translator的实验技术。
顾名思义,该工具旨在将视频从一种语言翻译成另一种语言,同时保留整体基调和氛围。这意味着该技术不仅可以将音频从一种语言翻译成另一种语言,还可以模仿说话者的声音、语气和面部表情,人物说话视频会根据目标语言的发音同步改变口型。

如上图所示,Universal Translator 首先检测单词并进行翻译。然后,它会检查说话者的语气以及他们强调的内容。结合这两个方面后,它会生成目标语言的语音。最后,它会根据 AI 生成的语音的发音同步视频中说话者的口型。

考虑到此工具可能被滥用来创建虚假视频,谷歌表示将限制对 Universal Translator 的访问。因此,只有谷歌授权合作伙伴才能将其用于建设性项目,而普通用户无法使用。
相关推荐
-
基于知识的神经符号结合的离散推理研究
一、以轻量级算子为核心的文本离散推理 该工作发表于 NAACL 2022(OPERA: Operation-Pivoted Discrete Reasoning over Text…
2023年 6月 2日 -
OpenAI微软谷歌苹果英伟达等公司高管有望共同探讨制定AI使用标准
4月11日消息,据外媒报道,在OpenAI训练的ChatGPT人工智能聊天机器人大火之后,多家公司在加速相关或类似技术的研发和应用,OpenAI在3月14日也推出了更先进的自然语言…
2023年 4月 15日 -
谷歌旗下 DeepMind 开发出 RoboCat AI 模型,能控制多种机器人执行一系列任务
6 月 26 日消息,谷歌旗下 DeepMind 表示,该公司已经开发出一种名为 RoboCat 的人工智能模型,可以控制不同的机器人手臂执行一系列任务。仅仅这一点并不特别新颖,但…
2023年 7月 6日 -
Meta 发布新型「类人」人工智能图像生成模型「I-JEPA」:填补图像缺失部分更准确
站长之家(ChinaZ.com) 6月14日消息:Meta 周二宣布,将向研究人员提供一种新的「类人」人工智能模型的组件,该模型可以比现有模型更准确地分析和填补未完成的图像。 图片…
2023年 6月 15日 -
一键重返高考!史上第一套高考AI模拟卷发布:用上百度文心大模型
5月18日消息,今天距离2023年全国高考还有20天,全国的高三考生此时此刻都在积极且紧张地备考当中。 在2023年高考来临之际,王老吉联合百度运用文心大模型能力,推出高考AI模拟…
2023年 5月 19日 -
中公教育布局AI教学平台 提供个性化学习体验
【Aigcmore.com】5月15日消息,近日,中公教育在接受调研时宣布了一系列重要举措,以推进人工智能在教育领域的应用和创新。中公公司表示高度关注人工智能等前沿技术的发展和教育…
2023年 5月 15日 -
GPT技术风起云涌 国内各大企业研发自家应用布局人工智能领域
【Aigcmore.com】4月27日消息,随着ChatGPT的火爆,国内各大企业也开始研发自家的GPT应用,这标志着GPT技术在人工智能领域的重要性和广泛应用。360创始人、董事…
2023年 4月 28日 -
人工智能驱动的十大绿色科技创新
绿色科技投资已成为全球应对气候变化、建设可持续未来的努力的重要组成部分。在近年来出现的各种技术中,人工智能(AI)已被证明是推动绿色创新的颠覆性技术。从优化能源消耗到减少浪费,人工…
2023年 6月 28日 -
目前可用的最佳 AI 图像生成器
从穿着羽绒服的教皇弗朗西斯到受韦斯·安德森启发的电影预告片,人工智能生成的图像在互联网上变得越来越普遍。原因不难看出——现代人工智能工具已经变得如此令人信服,以至于它们的图像甚至赢…
2023年 5月 8日 -
科大讯飞宣布讯飞星火APP发布,刘庆峰:每一阶段技术都可控
在科大讯飞24周年庆上,讯飞星火认知大模型V1.5发布,相比上一版本,V1.5星火大模型不仅各项能力获得提升,且在知识问答能力上提高了24%,在逻辑推理、数学和代码能力上分别有10…
2023年 6月 12日
