手和手指跟蹤被堅定地計劃為 XR 未來的標準界面。一位開發人員現在正在 SteamVR 上展示手指追蹤如何與 Myo 手鐲配合使用。
XR 領域的幾乎每個主要制造商都處理手和手指跟蹤:Valve Index(測試)的控制器內置了基本的手和手指跟蹤傳感器,HTC 為 Vive 眼鏡提供了手指跟蹤算法。索尼用于 psvr 2的新VR 控制器也應該提供一種手指追蹤功能。
也有Ultraleap等特殊模組的廠商,有的與VR、AR眼鏡廠商合作做配件。微軟或Nreal等 AR 眼鏡制造商也提供手和手指跟蹤作為 XR 輸入方法。
許多手部跟蹤方法遵循與人工智能相結合的光學方法:相機拍攝手和手指,計算機視覺算法識別運動。尤其是 Facebook,近年來在 Oculus Quest 的光學 AI 跟蹤方面取得了巨大進步。
Reddit 上的一位開發人員現在展示了在 SteamVR 上進行手指跟蹤的另一種可能方法:使用 EMG 設備,他測量手指肌肉移動時在前臂上產生的電脈沖。你可以在下面的視頻中看到他的結果。
從理論上講,如果人工智能技術能夠更好地識別精細圖案并將其轉換為合適的數字手指運動或命令,那么這些電信號就可以在前臂沒有過度或可能完全沒有手指運動的情況下被識別。這使得 EMG 技術對殘疾人來說很有趣。