Facebook正在开发VR超逼真的虚拟化身

Facebook已经发布了他们为虚拟现实环境创建的新的超现实主义虚拟化身,开发了该公司命名为“Codec Avatars”的先前作品。

查看下面的视频,了解有关虚拟现实头像及其创建方式的更多信息,仅使用位于虚拟现实耳机内的三个标准相机即可提供用户脸部的逼真图像。摄像机捕获用户的眼睛和嘴巴,并且使用该数据,系统能够比先前的系统更准确地表示特定个体的复杂面部姿势的细微差别。

超现实的虚拟化身在今年的SIGGRAPH 2019技术展上展出,Facebook发表了一篇论文,详细介绍了可通过以下链接获得的技术。

“虚拟现实(VR)的一个关键承诺是远程社交互动的可能性,它比任何现有的电信媒体更具沉浸感。然而,现有的社交VR体验由用户的不真实数字表示(即,风格化的化身)调解。这些风格化的代表限制了社交VR应用的采用,恰恰是那些最需要沉浸感的情况(例如,专业互动和亲密对话)。

“在这项工作中,我们提出了一个双向系统,可以使用消费者友好的耳机安装摄像头(C)为两个用户的完全相似的头像头部制作动画。这样做有两个主要挑战:无法调整相机视图和图像到头像域间隙。我们通过利用多视图几何所施加的约束来建立精确的图像到化身对应,从而用于学习用于实时跟踪的端到端模型,从而解决了这两个挑战。我们提出了针对数据收集和模型构建的培训C的设计,以及在VR中进行交互时使用的跟踪C。

(0)
上一篇 2022年3月28日
下一篇 2022年3月28日

相关推荐