除了手勢控制弊端之外，對于虛擬現(xiàn)實最尷尬的事情之一莫過于你看不見自己的手。當你戴上虛擬現(xiàn)實設備之后，你置身于一個看似無比真實的世界，讓你感到身臨其境，但當你伸手試圖抓取眼前某物或是想夠到某物的時候，那里確實什么都不存在，這就瞬間將營造的氣氛給打破了。

　　一支微軟研發(fā)小組希望通過名為Handpose的手勢追蹤技術，能夠幫助人類與虛擬環(huán)境的交互更加自然，且不僅限于VR或者AR領域，甚至是人與計算機或者其他連接設備之間的交互。

　　在位于英國劍橋的微軟研究院，設計技術員David Sweeney告訴記者：“現(xiàn)實始于我們與物理世界的交互，而交互的主要途徑是我們的雙手。這是我們習以為常的認知，我們甚至不去思考這個動作，一切都是出于人的直覺。”

　　Handpose項目開始于2014年，這一項目的計算機視覺進展于今年早些時候被揭開面紗，由于該項目還在研究階段，因此微軟邀請記者到現(xiàn)場體驗。

　　記者在現(xiàn)實世界中移動雙手的時候能看到眼前屏幕上被同步復制的雙手，能夠通過現(xiàn)實的抓取來拿到Unity引擎所創(chuàng)造的虛擬物件。Sweeney總結道：“這一項目通過獲取現(xiàn)實中的深度信息進而映射出雙手。”這跟Leap Motion有相似的設計思路。

　　Kinect傳感器捕獲深度信息，Handpose軟件將信息轉換成數(shù)據(jù)點陣，從而還原出手的網(wǎng)狀模型（有多種不同的模型用于適應不同大小的手）。本質上來說，每一個數(shù)據(jù)點被定位到手形模型表面，因此它能夠模擬出與你現(xiàn)實中手如出一轍的動作。它還通過機器學習來使得模擬運動轉換成實際的動作。

　　當記者使用該技術的時候，遇到了一些相當嚴重的錯誤，比如當傳感器前有不止一個人的時候或是記者試圖讓雙手靠近的時候。但正常使用過程中，手的每一個細節(jié)都被很完美地捕捉并映射在屏幕上了。在這里有一個手勢追蹤的主要難題：我們的雙手由很多可移動部分組成，每一個細小的移動都該被視為一個自然的動作。

　　這項技術使VR更加擬真。視頻中記者使用Oculus Rift頭戴設備配合Handpose技術，可以看到自己的雙手戳拽一只兔子，使其像萬用黏土一樣塌陷了，這類似于一系列虛擬控制器模擬按鍵所產(chǎn)生的交互信息。

　　相比于觸覺設備如Oculus Touch或是HTC Vive控制器，使用自己雙手的優(yōu)勢在于一切移動都是憑借直覺，哪怕從未接觸過虛擬現(xiàn)實的人也能輕松上手。

　　Sweeney說到：“人類的雙手是通過上百萬年進化而來的，它們是如此精妙，假如讓裝電池的設備取代人類的雙手，這該是多愚蠢的事情啊。”

　　有趣的是，Sweeney認為在你與虛擬現(xiàn)實交互的時候觸覺反饋（能夠感知你所觸摸到的物體）是不需要的，哪怕游戲中有虛擬物理對象，就像上面視頻中的兔子演示，只存在虛擬現(xiàn)實中的反饋。Sweeney說：“在心理上，我能通過虛擬交互來‘感受到’物理層面的互動。”雖然聽起來有些荒誕，但這一點在記者的實際體驗中得到了驗證。

　　Handpose團隊對該項目的進展、速度以及效率感到自豪。該軟件被設計成調(diào)用最小化的計算資源，并且僅運行于CPU之上，因此你無需擔心顯卡無法駕馭創(chuàng)造出來的豐富的虛擬世界。

　　Sweeney還沒辦法明確說明該項目何時對公眾開放。但是他暗示到軟件將不僅僅運行于VR或AR設備，而是讓你的雙手可以作為“低功耗控制器”與任意物聯(lián)網(wǎng)設備交互。想象一下，控制燈的開與關只需要用手輕輕一指，大概還需要與聲音識別一塊兒使用。
來源：Victoria Turk

更多原創(chuàng)設計盡在高品聚