编译/VR陀螺

早在2015年，就有传言称苹果公司悄悄收购了一家名为 "Faceshift "的实时动作捕捉公司。该技术后来很可能被用来创造Animoji和Memoji。然后在2019年，苹果收购了IKinema，这是一家了不起的公司，它生产的技术可以让化身模仿用户全身动作和详细的面部表情。

去年夏天，苹果公司获得了11,062,476号专利，该专利是由苹果公司收购Metaio后的两名工程师推动的。在该专利的背景中，苹果表示："头戴式设备（HMD）为用户提供沉浸式CGR体验。一些CGR体验需要知道用户的身体姿势。例如，一些CGR体验展示了一个模仿用户行为的用户虚拟化身。如果用户移动他们身体的某一部分，化身就会移动相应的部分。"这与IKinema的技术完全吻合。

昨天，美国专利商标局公布了苹果公司的一项专利申请，题为 "在三维环境中呈现虚拟化身"。苹果专利的一部分涵盖了手部追踪/手势追踪，这是郭明錤在一份关于苹果第二代头显产品的新报告中强调的功能。此外，该专利第二个涉及的方面还包括眼球追踪。

苹果这份专利真正有趣的地方是从专利图7A开始的，该专利描述了在动画电影场景中对用户（演员）的拍摄。

图源：patentlyapple

苹果公司的专利图7A描述了一个用户#701站在真实环境#700中，双臂抬起，用户的左手拿着一个杯子#702。在一些实施方案中，真实环境是一个动作捕捉工作室，它包括摄像机705-1、705-2、705-3和705-4，用于捕捉数据（例如，图像数据和/或深度数据），可用于确定用户的一个或多个部分的姿势。

用户各部分的姿势被用来确定CGR环境中相应的虚拟化身角色（例如，见图7C中的化身721的姿势），例如在一个动画电影场景内。

在苹果公司的专利图7B和7C中，苹果公司指出了一个 "确定图"（#710），它是计算机系统对部分用户的确定姿势的可视化表示。换句话说，确定图表示使用计算机系统确定的用户身体不同部分的位置确定性的计算估算（例如，用户身体部分的估计位置是正确的概率）。

确定图是人体的模板，它代表了人类的基本特征，如头、颈、肩、躯干、手臂、手、腿和脚。

在一些实施方案中，确定图表示各种子特征，如手指、肘部、膝盖、眼睛、鼻子、耳朵和嘴巴。确定图的人体特征对应于用户的身体特征。

图源：patentlyapple

苹果公司的专利图10A描述了一个例子，其中用户在CGR环境中被表示为虚拟化身角色，这些化身角色具有基于不同外观模板的外观。

在一些实施例中，虚拟化身具有基于人物模板或抽象模板的外观。在一些实施例中，化身通过改变姿势来改变外观。在一些实施例中，化身通过在角色模板和抽象模板之间的转换来改变外观。

图源：patentlyapple

苹果公司的专利图12是一个示例性的方法（#1200）流程图，用于呈现具有基于不同外观模板的虚拟化身。

该方法（#1200）可以在与显示生成组件通信的iPhone、iPad、MR头显上执行。在一些实施例中，该方法可适用于视觉输出设备、3D显示器、透明显示器、投影仪、平视显示器、显示控制器或触摸屏。

苹果进一步指出，虚拟化身的模板可以是人类、卡通人物或非人类人物的拟人化构造，如狗、机器人等。

苹果可以将这项技术用于专利中所述的未来Apple TV+产品，但它将如何应用于苹果设备目前尚不明确。未来的iPhone和iPad是否会提供多个TrueDepth摄像头？苹果是否会出售用于家庭工作室的专业独立深度相机？虽然只有时间能说明问题，但总的来说这是一个迷人的专利，总有一天会真正进入市场。

要了解更多关于这项专利的细节，可查阅苹果专利20210382544。 考虑到这是一项专利申请，目前还不清楚包含该专利技术的产品何时会上市。

来源：patentlyapple