虚幻的新iPhone应用程序可以使用面部ID传感器进行实时运动捕捉

虚幻引擎开发商EpicGames发布了Live Link Face，这是一款iPhone应用程序，它使用手机中的前置3D传感器来为视频游戏、动画或电影等3D项目中的面部动画进行实时运动捕捉。

这款应用使用来自苹果ARKit框架和iPhone TrueDepth传感器阵列的工具，将实况动作捕捉从看着手机的演员传输到附近工作站上运行的虚幻引擎中的3D角色。它捕捉面部表情以及头部和颈部的旋转。

Live Link Face可以同时传输到多台机器上，并且强大的时间码支持和精确的帧精度使其能够与其他舞台组件无缝同步，如摄像头和身体动作捕捉，据Etic'；发布这款应用的博客帖子所说，这款应用具有强大的时间编码支持和精确的帧精度，可以与其他舞台组件无缝同步，比如摄像头和身体动作捕捉。用户可以从手机的前置摄像头获得一个原始混合形状数据的CSV，以及一个带有时间码的MOV。

对许多人来说，iPhone的TrueDepth传感器阵列似乎是一个寻找问题的解决方案--Touch ID在早期的iPhone中适用于大多数人的目的，而且除了面部识别之外，这项技术没有太多明确的应用。当然，也有Animoji，很多人喜欢它们--但大多数人不会说他们单独证明了这项技术的合理性。

但这里有一个明显的卖点，尽管面向的观众很少：独立游戏开发商和电影制作人可以在iPhone上使用这样的应用程序进行动作捕捉，让虚拟角色生动地呈现出真人演员的面部表情和其他动作。这是传统上涉及昂贵设备的制片厂的东西，除了大公司之外，所有人都买不起。

当然，iPhone的传感器所能捕捉到的动作不如AAA级游戏开发工作室或主要电影公司所用的那样准确，所以那些高端工作室现在不会为了iPhone放弃装备齐全的动画工作室。但现在，个人创建者和较小的团队可以做一些以前成本过高的事情。

不过，就其本身而言，这并不是一个真正的消费者用例。到目前为止，这些传感器主要被苹果和第三方应用程序开发者使用，以使AR应用程序和照片滤镜更加准确。

苹果最近在iPad Pro上添加了激光雷达传感器，互联网上也有大量传言称，iPad Pro也将成为顶级iPhone机型。虽然iPad Pro的后置传感器使用了与前置TrueDepth阵列不同的技术，但它可以产生类似的结果。苹果公司已经展示了iPad Pro的后置传感器，可以记录人的动作捕捉--尽管记录的是人的全身，而不是他们的脸。

对于那些不熟悉的人来说，虚幻引擎最初是一个图形引擎，被AAA级视频游戏制片厂用于战争机器和质量效果等游戏，随着时间的推移，它已经演变成被印度人使用，以及在电影制作、建筑和设计等其他情况下使用。它与另一个流行的引擎Unity以及由不同工作室开发的内部工具展开竞争。