FacebookRealityLabs谈论手部追踪技术

Facebook Reality Labs (FRL) 致力于许多旨在使与技术交互更平易近人的项目。FRL 正在研究的技术包括 VR 耳机和 AR 眼镜。手部追踪技术对虚拟现实尤为重要，让该技术通过“随你而来”的方式与人际互动更加身临其境。

FRL 正在进行的工作旨在构建更自然的设备，并从 Touch 控制器开始。这些控制器设计为握持舒适，内部装有大量传感器。触摸控制器提供了栩栩如生的手部存在感，并使基本的 VR 交互感觉更像真实的东西。

FRL 正在努力消除对手动控制器的需求，转而感知裸手。该实验室在五年前开始为 VR 进行手部跟踪，当时没有人提供消费级质量、无控制器的手部跟踪功能。这意味着该技术必须从头开始创建。

下面的视频遵循开发过程，展示了导致最终产品的一些设备的原型。FRL 目前正在探索新的文本输入实验形式，这是提高生产力的一项常见且关键的任务。FRL 提出了一种新颖的方法，可以使用基于标记的手部跟踪系统的手部动作在没有键盘的任何平面上进行触摸打字。该系统将动作直接输入并解码为用户想要输入的文本。

研究人员指出，该技术仍处于早期研究阶段，但说明了手部追踪在活动场景中的潜力。研究人员必须理解不稳定的打字模式，并采用自动语音识别的统计解码技术，使用运动模型来预测手部运动的击键。使用这种方法，打字员平均每分钟 73 个单词，使用他们的手、平坦的表面和其他任何东西的未纠正错误率为 2.4%。与使用实际键盘相比，打字员使用新系统实现了相似的速度和准确性。