谷歌推出AI视频对口型技术:根据翻译语言改变人物说话方式,但不开放使用
在 2023 I / O 开发者大会上,谷歌宣布正在开发一项名为 Universal Translator的实验技术。
顾名思义,该工具旨在将视频从一种语言翻译成另一种语言,同时保留整体基调和氛围。这意味着该技术不仅可以将音频从一种语言翻译成另一种语言,还可以模仿说话者的声音、语气和面部表情,人物说话视频会根据目标语言的发音同步改变口型。

如上图所示,Universal Translator 首先检测单词并进行翻译。然后,它会检查说话者的语气以及他们强调的内容。结合这两个方面后,它会生成目标语言的语音。最后,它会根据 AI 生成的语音的发音同步视频中说话者的口型。

考虑到此工具可能被滥用来创建虚假视频,谷歌表示将限制对 Universal Translator 的访问。因此,只有谷歌授权合作伙伴才能将其用于建设性项目,而普通用户无法使用。
相关推荐
-
预计苹果要到 2024 年下半年才会推出重大人工智能相关服务
站长之家(ChinaZ.com) 7月3日消息:苹果公司上周五成为全球首家市值超过 3 万亿美元的公司,这一里程碑反映出 iPhone 的持久影响力和韧性,这款非凡产品仍在改变着全…
2023年 7月 4日 -
北京拟对 AI 训练所需的算力推行统筹供给,整合大模型中文语料库
5 月 17 日消息,北京市于 5 月 12 日发布了关于对《北京市促进通用人工智能创新发展的若干措施(2023-2025 年)(征求意见稿)》(下称《征求意见稿》)公开征集意见的…
2023年 5月 22日 -
一路狂飙的ChatGPT,是时候被监管了
即使你过去从不关注科技领域,但近期也会被一个由OpenAI(美国的一家人工智能公司)开发的人工智能聊天机器人“ChatGPT”刷屏。 与上届“全球网红”元宇宙不同,这位新晋的“全能…
2023年 5月 12日 -
AI前哨|未来你也能影响ChatGPT决策?OpenAI透露重要信息
凤凰网科技讯 《AI前哨》北京时间5月23日消息,ChatGPT开发商OpenAI总裁格雷格布罗克曼(Greg Brockman)周一表示,该公司正在测试如何在影响其人工智能(AI…
2023年 5月 23日 -
人工智能驱动智能建筑会是未来趋势吗?
人工智能(AI)正在彻底改变我们管理和控制建筑物的方式,提供比以往任何时候都更高效、更具成本效益的解决方案。 人工智能驱动的智能建筑控制旨在通过自动调节温度、照明和其他建筑系统来优…
2023年 6月 26日 -
交互式数据分析和处理新方法:pandas-ai =Pandas + ChatGPT
Python Pandas是一个为Python编程提供数据操作和分析功能的开源工具包。这个库已经成为数据科学家和分析师的必备工具。它提供了一种有效的方法来管理结构化数据(Serie…
2023年 5月 16日 -
此「错」并非真的错:从四篇经典论文入手,理解Transformer架构图「错」在何处
前段时间,一条指出谷歌大脑团队论文《Attention Is All You Need》中 Transformer 构架图与代码不一致的推文引发了大量的讨论。 对于 Sebasti…
2023年 6月 26日 -
多模态 DNN 模型在药物相互作用预测任务中的应用
一、背景介绍 首先和大家分享下药物发现的相关背景。 1、背景介绍 药物发现领域近几年非常火热,特别是借助 AI 来辅助药厂的药物发现工作,包括药物研发。药物研发过程的周期非常长,通…
2023年 5月 20日 -
首个模拟人类认知的思维框架OlaGPT:六大模块增强语言模型,推理能力最高提升85%
ChatGPT刚发布的时候,给了我们太多的震撼,模型在对话上的表现实在是太像人类了,以至于产生了语言模型具有「思维能力」的错觉。 不过在深入了解语言模型之后,研究人员们也逐渐发现了…
2023年 6月 9日 -
英国政府宣布投资10亿英镑发展AI技术
【Aigcmore.com】4月26日消息,英国政府近日宣布将投资1亿英镑,建立新的“基础模型工作组”(Foundation ModelTaskforce),以开发能带来“全球竞争…
2023年 4月 28日
