拒絕手柄 未來或直接用雙手進行VR遊戲

除瞭手勢控制弊端之外,對於虛擬現實最尷尬的事情之一莫過於你看不見自己的手。當你戴上虛擬現實設備之後,你置身於一個看似無比真實的世界,讓你感到身臨其境,但當你伸手試圖抓取眼前某物或是想夠到某物的時候,那裡確實什麼都不存在,這就瞬間將營造的氣氛給打破瞭。

一支微軟研發小組希望通過名為Handpose的手勢追蹤技術,能夠幫助人類與虛擬環境的交互更加自然,且不僅限於VR或者AR領域,甚至是人與計算機或者其他連接設備之間的交互。

在位於英國劍橋的微軟研究院,設計技術員David Sweeney告訴記者:“現實始於我們與物理世界的交互,而交互的主要途徑是我們的雙手。這是我們習以為常的認知,我們甚至不去思考這個動作,一切都是出於人的直覺。”

26

Handpose項目開始於2014年,這一項目的計算機視覺進展於今年早些時候被揭開面紗,由於該項目還在研究階段,因此微軟邀請記者到現場體驗。

記者在現實世界中移動雙手的時候能看到眼前屏幕上被同步復制的雙手,能夠通過現實的抓取來拿到Unity引擎所創造的虛擬物件。Sweeney總結道:“這一項目通過獲取現實中的深度信息進而映射出雙手。”這跟Leap Motion有相似的設計思路。

Kinect傳感器捕獲深度信息,Handpose軟件將信息轉換成數據點陣,從而還原出手的網狀模型(有多種不同的模型用於適應不同大小的手)。本質上來說,每一個數據點被定位到手形模型表面,因此它能夠模擬出與你現實中手如出一轍的動作。它還通過機器學習來使得模擬運動轉換成實際的動作。

當記者使用該技術的時候,遇到瞭一些相當嚴重的錯誤,比如當傳感器前有不止一個人的時候或是記者試圖讓雙手靠近的時候。但正常使用過程中,手的每一個細節都被很完美地捕捉並映射在屏幕上瞭。在這裡有一個手勢追蹤的主要難題:我們的雙手由很多可移動部分組成,每一個細小的移動都該被視為一個自然的動作。

這項技術使VR更加擬真。視頻中記者使用Oculus Rift頭戴設備配合Handpose技術,可以看到自己的雙手戳拽一隻兔子,使其像萬用黏土一樣塌陷瞭,這類似於一系列虛擬控制器模擬按鍵所產生的交互信息。

27

相比於觸覺設備如Oculus Touch或是HTC Vive控制器,使用自己雙手的優勢在於一切移動都是憑借直覺,哪怕從未接觸過虛擬現實的人也能輕松上手。

Sweeney說到:“人類的雙手是通過上百萬年進化而來的,它們是如此精妙,假如讓裝電池的設備取代人類的雙手,這該是多愚蠢的事情啊。”

有趣的是,Sweeney認為在你與虛擬現實交互的時候觸覺反饋(能夠感知你所觸摸到的物體)是不需要的,哪怕遊戲中有虛擬物理對象,就像上面視頻中的兔子演示,隻存在虛擬現實中的反饋。Sweeney說:“在心理上,我能通過虛擬交互來‘感受到’物理層面的互動。”雖然聽起來有些荒誕,但這一點在記者的實際體驗中得到瞭驗證。

Handpose團隊對該項目的進展、速度以及效率感到自豪。該軟件被設計成調用最小化的計算資源,並且僅運行於CPU之上,因此你無需擔心顯卡無法駕馭創造出來的豐富的虛擬世界。

Sweeney還沒辦法明確說明該項目何時對公眾開放。但是他暗示到軟件將不僅僅運行於VR或AR設備,而是讓你的雙手可以作為“低功耗控制器”與任意物聯網設備交互。想象一下,控制燈的開與關隻需要用手輕輕一指,大概還需要與聲音識別一塊兒使用。

from:Victoria Turk

Comments are closed.