在今年的WWDC23大会上，苹果公司在介绍苹果Vision Pro时推出了一项名为“Eyesight”的特殊功能。苹果公司表示：“苹果Vision Pro可以帮助你与周围的人保持联系。EyeSight可以显示你的眼睛，让附近的人知道你正在使用应用程序或完全沉浸在体验中。当有人靠近时，苹果Vision Pro会同时让你看到对方，并向对方展示你的眼睛。”
从技术上讲，苹果公司的Mike Rockwell是这样描述Eyesight的：“我们认真思考了佩戴Vision Pro时他人如何与你互动的问题。Eyesight利用特别的弧形OLED面板和光栅透镜，将你眼睛的正确视角投射给每一个注视你的人。其结果是，3D显示屏使设备看起来像是透明的。”
近日，欧洲专利局公布了微软一项新专利，标题为“控制计算机生成的面部体验”。
微软指出，他们的发明涉及显示计算机生成的面部表情。其中一个例子提供了一种显示计算机生成的面部表情的方法。该方法包括接收表情数据，并至少根据表情数据为用户的眼睛区域生成一个或多个面部表情。该方法还包括在头戴式设备的外部显示屏上显示眼睛区域的一个或多个面部表情。
微软专利图 11A 和 11B 展示了一个示例场景，在该场景中，头戴式设备上的外部显示屏被激活，并在显示屏上打开计算机生成的面部表情，尤其是在眼睛区域。
图源：patentlyapple
上面的微软专利图 12 显示了配置为显示计算机生成的面部表情的头戴式设备示例的框图；图 13 显示了显示计算机生成的面部表情的示例方法的流程图。
本专利中公开的示例涉及利用由一个或多个面部追踪传感器组成的面部追踪系统，用于控制计算机生成的面部表情的显示。
此外，从每个面部追踪传感器接收随时间变化的数值，并根据接收到的数据确定每个面部追踪传感器的数值范围，该数值范围包括在一段时间内（例如在滚动时间窗口内）接收到的最小值和最大值。系统会对值范围和接收到的传感器值进行处理，将接收到的传感器值转换为混合形状映射，其中混合形状映射对应于值范围内传感器值的位置。
然后，至少根据混合形状映射确定表达数据，并提供给一个或多个设备进行展示。通过这种方式，一组面部追踪传感器可共同用于感知用户表情的整体近似值，从而控制以虚拟化身形式呈现的表情。化身可以呈现给传感器设备用户以外的其他人。这可能有助于 AR和/或 VR环境中的人际交流。
想了解更多专利详情，请查阅微软完整的欧洲专利申请 #WO/2023/219685。微软的专利强烈暗示，他们可能正在开发 HoloLens 之外的 XR 头显。如今的 HoloLens 允许外界看到 HoloLens 用户的眼睛。因此，这项发明显然不是为 HoloLens 而设计的。
此外，在2022 年 8 月，Meta的一项专利申请也显示该公司正在开发一种在头显设备中查看用户眼睛的方法，如下图专利所示。
图源：patentlyapple
来源：patentlyapple
