上VR网:您身边最放心的安全VR下载站!首页|网站地图

您的位置:首页 > VR资讯 > VR行业动态 > 谷歌可以重新创建你的脸更好的混合现实镜头

谷歌可以重新创建你的脸更好的混合现实镜头

2017-02-22 10:33:07来源: uploadvr 作者: 佚名 我要评论()

我们是UploadVR的混合现实的大粉丝。这是一个伟大的方式来显示什么人在VR正在做什么。

像Owlchemy Labs和LIV这样的创业公司试图使捕获过程更容易,同时推动更高的质量,但目前的方法都受到一个主要障碍的限制。人体最具表现力的部分,脸部,在捕获期间大多被阻塞。你很大程度上必须想象人们在与虚拟世界交互时的表情。

然而,谷歌展示了一些令人印象深刻的研究,将技术提高到一个新的水平。使用一系列的技术,包括一个修改的HTC Vive 与SMI眼动跟踪,谷歌数字地重新创建你的脸,代替阻止它的VR耳机。

谷歌可以重新创建你的脸更好的混合现实镜头

这项工作是Research,Daydream Labs和Google的YouTube小组之间持续合作的结果。根据一篇博客潜入研究,这里是如何工作:

我们的技术背后的核心思想是使用用户面部的3D模型作为隐藏面部的代理。该代理用于在MR视频中合成面部,从而创建头戴式耳机被移除的印象。首先,我们用我们所谓的凝视依赖的动态外观为用户捕获个性化的3D脸部模型。此初始校准步骤要求用户坐在彩色+深度相机和显示器前面,然后用眼睛跟踪显示器上的标记。我们使用这种一次性校准程序(通常需要不到一分钟)来获取用户的3D面部模型,并且学习将外观图像(或纹理)映射到不同的眼睛注视方向和眨眼的数据库。这个注视数据库(即具有由眼睛注视索引的纹理的面部模型)允许我们在合成期间动态地改变面部的外观并且生成任何期望的眼睛注视,从而使得合成的面部看起来自然和活着。

该项目背后的团队成员包括研究科学家Vivek Kwatra和软件工程师Christian Frueh和Avneesh Sud相信这种方法具有巨大的潜力,“通过VR视频会议,多人VR游戏等多种应用增强VR本身的沟通和社交互动;探索与朋友和家人。


声明:www.3vrvr.com所发布的内容均来源于互联网,目的在于传递信息,但不代表本站赞同其观点及立场,版权归属原作者,如有侵权请联系删除。

网友评论