無需VR外設，普林斯頓學霸用DeepHand解放你的雙手

普林斯頓大學的研究人員用深度感測攝像頭和深度學習網路開發DeepHand系統，可以把手勢運動整合到VR環境中去。

你能想象當你體驗VR遊戲的時候，手上再也不用戴上一些額外的裝置就可以在虛擬現實中“縱橫捭闔”嗎？普林斯頓大學的學霸們給你yes的答案。

在VR中最常見的輸入方式是用操作杆或者手柄，也會有眼控以及聲控等，不過就目前發展狀況來看，手勢識別更有可能成為主流。此前來自荷蘭的開發團隊就推出過名為Manus VR的手套，他們利用位置追蹤技術實現手部追蹤，讓玩家擺脫手持控制器的束縛。

普林斯頓大學研究的這款系統叫做DeepHand，其工作原理有點類似於Leap Motion的深度手勢識別基礎功能Orion。基於雙目識別技術的Orion提供了一種新的手勢識別的輸入方式，它通過雙目攝像頭採集資訊，經過一系列的流程將手部的活動資訊實時反饋到處理器，最後顯示在VR頭顯中。

Orion的手勢識別原理

而DeepHand也是通過攝像頭採集各種角度和方式的手勢變化，之後經過深度學習網路開發的特定演算法，在存有超過250萬手勢的資料庫中快速掃描，匹配出精確度最高的手勢動作，最後在VR環境中顯示出來。

DeepHand的工作原理

該研究論文的作者Ayan Sinha表示：“我們能夠識別手勢的不同角度，通過攝像頭觀察不同的角度變換，演算法將其轉化為數字訊號，然後在VR環境中呈現。”同時為了確保虛擬手勢運動能夠得到快速反饋，研究人員們主要通過判斷資料庫中手勢動作的數字位置，然後推算出其鄰近的數字位置，進而預測手勢變化的可能性。

這是深度學習網路中，研究人員首次使用DeepHand識別手勢，並將其反饋到資料庫中。雖然在執行這些資料的過程中需要強大的計算處理能力，但是對於一臺普通配置的電腦來說仍然是可以駕馭的。我們可以期待這款識別系統真正投入使用中會與VR產生怎樣的“化學反應”。

原文釋出時間：2016-06-28 11:10

本文作者：巫盼

本文來自雲棲社群合作伙伴鎂客網，瞭解相關資訊可以關注鎂客網。