目前,手部和手指追踪已被众多厂商认为是未来 XR 的标准接口。最近,一位国外开发者在 SteamVR 上展示了手指追踪如何与 Myo 腕带一起工作。

 

  据了解,XR 领域的几乎所有主要制造商都在关注手部和手指追踪:Valve Index 的控制器通过传感器内置了基本的手部和手指追踪功能;而 HTC 则在 Vive 头显上提供了手指追踪算法;作为游戏主机业的巨头,索尼用于 PSVR2 的下一代 VR 控制器也可能提供某种形式的手指追踪功能。

  此外,行业里还有一些特殊模块的制造商,如 Ultraleap。它们大多与 VR 和 AR 设备制造商进行配件合作。值得一提的是,微软和 Nreal 等 AR 眼镜制造商已能提供手部和手指追踪作为 XR 输入法。
 

 

  从技术上说,当下主流手部追踪方法都遵循与人工智能相结合的光学方法:相机拍摄手和手指,计算机视觉算法识别运动。作为行业内的领军企业,Facebook 近年来通过 Oculus Quest 在光学 AI 追踪方面已取得了巨大进展。

  最近,一位开发者在 Reddit 上展示了其在 SteamVR 中进行手指追踪的另一种可能:他使用 EMG 设备测量手指肌肉运动产生的前臂上的电脉冲,从而实现相应的追踪效果。

 

  理论上,这些电信号可以在前臂中被检测到,而不需要大量或甚至可能根本没有手指运动,因为人工智能技术在识别细微动作并将其转化为数字运动或命令方面具有优势,而这也使得 EMG 技术对残疾人很有意义。