云骑士一键装系统-简单一键在线装机工具,一键备份还原功能让系统维护更方便!
新闻 分享 评测 游戏资讯
当前位置:云骑士 > 科技 > 新闻 > NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美

NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美

文案作者: 骑士
2021-08-04 09:35:34
播放量:

NVIDIA 研究人员所开发的 AI 工具 NVIDIA Maxine SDK 当中,有着相当多的深度学习模型其中包含 Vid2Vid Cameo,这模型利用生成对抗网路 (GAN),只需你的一张平面照片,就能产生出不同角度、立体的头像。

NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美

就像 NVIDIA 敬致 Netflix 播出的《纸房子》影集中视讯的画面,由 NVIDIA 研究人员来说明 Vid2Vid Cameo 可提供给视讯会议更完美的人体头像,参与者只需要在加入视讯通话前先上传一张参考图片,可以是自己的真实照片或卡通图片,就能使用这项功能。

Vid2Vid Cameo 只需要两个元素,便能建立出用于视讯会议的逼真 AI 对话头像,包含一张使用者的脸部照片以及一个视讯串流内容,该模型在 NVIDIA DGX 系统上使用 18 万个高品质对话头像的资料集来进行训练。

Vid2Vid Cameo 的模式能够辨识脸部的二十个关键点,这些关键点针对包括眼睛、嘴巴和鼻子在内的特徵位置进行编码,接着模型会从通话者的参考图片中撷取这些关键点,通话者的图片可以事先发送给其他参与视讯会议的人,或从过往的会议中重複使用。

如此一来,视讯会议平台只需发送说话者脸部关键点的动作资料,而不用在每一个与会者之间发送庞大的即时视讯串流内容;对接收者来说,GAN 模型在接收端使用这些资讯来合成一个模仿参考图片外观的视讯内容。

NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美(1)

NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美(2)

利用 Vid2Vid Cameo 后,视讯会议只需传送会议者脸部的位置及关键点,而并即时的在所有与会者电脑中,藉由 AI 来模拟出会议者的立体头像,让整体视讯会议品质可更佳流畅,且不影响视讯画质。

NVIDIA 的研究人员发现,Vid2Vid Cameo 可以产生更为真实清晰的结果,不管参考图片和视讯内容是否出自同一个人,还是当 AI 把一个人的动作转移到另一个人的参考图片上,它的表现都比最先进的模型更出色。

NVIDIA Maxine云端AI视讯技术Vid2Vid Cameo让会议画面更完美(3)

Vid2Vid Cameo 模型论文的作者为 NVIDIA 研究人员 Arun Mallya 和两位来自台湾的 Ting-Chun Wang、和 Ming-Yu Liu。NVIDIA Research 团队由全球两百多名科学家组成,专注于 AI、电脑视觉、自动驾驶车、机器人和绘图等领域。

在此特别感谢于 Netflix 播出的《纸房子》影集中,替教授进行英语配音的演员 Edan Moses,感谢他为上述我们最新的 AI 研究成果影片所做出的贡献。

光影展览海报长页
图文
光影展览海报长页
以甲虫设计为例,打开微信,点击搜索,输入甲虫设计,关注公众号,点击邀请函,选择甲虫设计,我的,登录,点击长页,选择企展会务,选择模板,点...
阅读:201 发布时间:2021-09-19
迅捷CAD看图如何标注图纸
图文
迅捷CAD看图如何标注图纸
打开迅捷CAD看图软件,点击顶部菜单栏中的文件,在弹出的对话框中选择需要打开的CAD图纸。接着在软件左侧的菜单栏中点击标注图标,并调用该图标。然...
阅读:303 发布时间:2019-12-17
怎样申请抖音官方认证?
图文
怎样申请抖音官方认证?
首先打开抖音,点击右下角的我,然后在点击右上角的菜单按钮,在菜单中点击下方的设置,然后选择账号与安全,点击下方的申请官方认证。...
阅读:652 发布时间:2021-03-01
什么是合约机手机
图文
什么是合约机手机
合约机泛指通讯运营商与手机生产商合伙定制的合法手机类型,用户使用该手机必须和指定运营商签约,而且要一次性付清租机款。...
阅读:921 发布时间:2020-11-13
两个无线路由器怎么无线桥接
图文
两个无线路由器怎么无线桥接
路由器A设置可以上网的以后,路由器B连到电脑上开始线线桥接到路由器A上,配置路由器B的IP地址。设定不要和路由器A是同一个网段,以免造成冲突。设置...
阅读:3507 发布时间:2021-01-14
东芝笔记本重装系统教程
东芝笔记本重装系统教程
浏览:13299
2020-06-24
电脑怎么恢复出厂设置
电脑怎么恢复出厂设置
浏览:49605
2021-12-31
苹果笔记本怎么装系统
苹果笔记本怎么装系统
浏览:23878
2020-06-23
hp笔记本重装系统
hp笔记本重装系统
浏览:7643
2022-01-05
键盘锁住了打不了字
键盘锁住了打不了字
浏览:23872
2019-10-17

客服二维码

邮箱:toplearningteam#gmail.com (请将#换成@)

Copyright 2013-2020 云骑士( https://www.yunqishi.net/ ) 版权所有 All Rights Reserved   鄂ICP备2023010145号-1