因此，Li 的研究重点在于 3D 化身。当映射人类面孔，处理如头发和眼镜等视觉障碍时，映像程序往往会陷入困境。为了避免这类问题，Pinscreen“建立了一个深层的卷积神经网络，可以不受约束的学习如何分割面部区域”。

所以，Pinscreen 用这种技术做出了哪些成果呢？

“我们将成为一个新型的社交媒体 / 沟通的平台，具有一些有趣的 AR 功能”，李说，“与 Snapchat 的 lenses 功能或 MSQRD 的应用程序有所不同。”

所以，Pinscreen 的 AR 社交平台不只是一个概念而已。Li 希望能够捕捉人的面部表情，而无需考虑眼镜、头发等可能阻碍摄像机拍摄的问题。在他看来，AR 能够扩展电影、社交和游戏的边界。

（腾讯视频）

这听起来相当具有开创意义，但要注意的是，并不仅仅只有 Li 和他的团队研究这一领域。迪士尼联合一些开发者推出了一个实时面部捕捉工具 Face2Face。前文提到过的 Faceshift、Facebook 和 Snapchat 也开始在这一领域展开研究。

那么，Pinscreen 的技术有什么不同？Li 表示，他们解决方案更强大，可以推断更精确的三维模型，因为他们可以明确地处理遮挡的问题。

“我们最重要的创新之处在于我们能够建立一个完整的 3D 头部模型，能够自动生成包括头发在内的所有图像”，Li 说，“一般来说，这项工作需要一个熟练的 CGI 建模师和装配师合作完成，但我们能完全自动生成”。

“最近在 SIGGRAPH 会议上展示的成果仍然需要输入很多图像，但我们的目标是尽可能减少对图像的输入，最好只输入一个单一的 2D 图像。”

Li 对于 Pinscreen 在社交媒体空间的潜力非常有信心，他说：“我们的技术能普及 3D 化身，必将被用在游戏、VR/AR 沉浸式沟通和 AI 代理。但我认为我们正在开发的社交媒体平台最酷的应用。”

“最重要的是”，他补充说，“我们要让人们制造出非常有趣的内容，并可以使用真正有趣的 AR 内容相互连接，而不需要昂贵的视觉特效。”

Li 表示，这一技术只是他们整个计划的一部分，这个技术 demo 只是他们想要采用的一个小功能。“Pinscreen 将包含更多有趣的功能，与其他的社交媒体平台很不一样。”

现在，Pinscreen 仍然有点神秘，让我们期待它登陆应用商店吧！返回搜狐，查看更多