iphone: iPhone一键生成仿真头像超震撼

2022-07-17 | 来源: 智东西 | 转到微信 | 有0人参与评论 | 字体: 放大缩小 | 收藏 | 打印

论文封面

近日Meta的元宇宙部门Meta Reality Labs研发了一项3D人脸数据采集技术，该技术可用于创建VR世界的仿真头像，该论文已经被全球计算机图形领域最高会议SIGGRAPH 2022接收。

作者表示，他们发明了一种虚拟头像创建技术，这项技术只需要少量用户信息就可以生成一个可以进行实时表情互动的3D真人头像。

这项技术降低了用户创建虚拟头像的门槛，通过这项技术，用户只用一部智能手机就可以创建自己的3D头像。该技术在元宇宙领域有很大的应用潜力。

这篇论文的名字叫做《Authentic Volumetric Avatars from a Phone Scan》（来自手机扫描的逼真立体头像）。

链接：https://paper.nweon.com/12381

一、降低技术门槛，用户可用iPhone创建头像

在Meta发明这项技术之前，现存的大部分建模技术都需要复杂的前提条件。像是需要专业设备采集数据，还要让采集对象前往专门的工作室等等。现存的有关真人头像建模的技术成本和门槛都较高，实现起来也很麻烦，这就导致了用户无法通过这些技术在VR应用里创建头像。

iPhone销量锐减苹果在中国渐不受欢迎

iOS18脱胎换骨！iPhone终于迈入AI时代(图)

《柯南》成灵异片？全影厅iPhone同时被唤醒(图)

所以为了降低创建真实人物头像的门槛，Meta部门研发了这项技术。研究人员称，过去收集人脸信息需要170多个摄像头的设备，现在只需要一台带RGBD摄像头的智能手机（如iPhone12）。

据称，用户用智能手机扫描自己头部采集数据的过程平均耗时3.5分钟，但是六个小时后这个头像才能在云端上被完整地渲染出来。

▲用户只需要用手机即可采集头像数据

二、采集255个人脸数据，Meta简化人脸采集步骤

通过这项技术，用户可以用一部iPhone12（或其他智能手机）采集自己的人脸数据。采集数据的具体方法就是让用户拿着手机围绕自己的头部，按照上下左右的方向移动一圈。

总的来说，数据将会分成以下五个步骤处理：首先模型会收到手机传来的人脸信息，收到人脸信息后，模型会采集肤质、脸型、肤色、五官、雀斑等细节信息。采集细节后，模型会分割人物和背景，获得一个头像的轮廓图。获得轮廓图后，模型会对之前获取的图像纹理进行分解。最后，模型将分解的图像重组为完整的人脸。

用这种方法创建的3D人脸头像不仅与真人十分相似，而且还能够改变面部表情，进行实时互动。