手和手指跟踪被坚定地计划为 XR 未来的标准界面。一位开发人员现在正在 SteamVR 上展示手指追踪如何与 Myo 手镯配合使用。
XR 领域的几乎每个主要制造商都处理手和手指跟踪:Valve Index(测试)的控制器内置了基本的手和手指跟踪传感器,HTC 为 Vive 眼镜提供了手指跟踪算法。索尼用于 psvr 2的新VR 控制器也应该提供一种手指追踪功能。
也有Ultraleap等特殊模组的厂商,有的与VR、AR眼镜厂商合作做配件。微软或Nreal等 AR 眼镜制造商也提供手和手指跟踪作为 XR 输入方法。
许多手部跟踪方法遵循与人工智能相结合的光学方法:相机拍摄手和手指,计算机视觉算法识别运动。尤其是 Facebook,近年来在 Oculus Quest 的光学 AI 跟踪方面取得了巨大进步。
Reddit 上的一位开发人员现在展示了在 SteamVR 上进行手指跟踪的另一种可能方法:使用 EMG 设备,他测量手指肌肉移动时在前臂上产生的电脉冲。你可以在下面的视频中看到他的结果。
从理论上讲,如果人工智能技术能够更好地识别精细图案并将其转换为合适的数字手指运动或命令,那么这些电信号就可以在前臂没有过度或可能完全没有手指运动的情况下被识别。这使得 EMG 技术对残疾人来说很有趣。