自從Oculus Quest手勢應用SDK開放之後,越來越多的VR手勢應用随之而來。雖然,目前來看實際體驗效果還并不完美,但是整體應用可玩性和趣味性大大提升。
同時,當然Quest中手勢識别自身還處于Beta階段,因此即便開發者創建了手勢應用目前仍不能上架Oculus商店,當前僅能通過SideQuest等第三方平台分發。
接下來,我們先回顧一下Oculus Quest手勢追蹤技術的發展:
- ◉2019年5月,Oculus Quest産品正式開售;
- ◉2019年9月,Oculus Connect 6大會公布Quest手勢追蹤功能;
- ◉2019年12月,Oculus Quest手勢追蹤功能伴随v12系統開放,僅局限于系統應用;
- ◉2019年12月,Oculus Quest手勢追蹤SDK正式開放,開發者們可進行開發或适配相關功能;
- ◉2020年2月,Unity插件可通過Oculus Link獲取Oculus Quest手勢數據。
據青亭網了解,手勢追蹤功能依賴于Facebook Reality Labs的研究,使用深度學習技術,通過Quest上單色攝像頭即可完成手指追蹤,無需深度傳感器即可識别單手18個骨骼節點。
手勢追蹤功能目前可部分取代手柄的功能,目前最新系統已經支持未開啟手柄自動切換到手勢控制模式。相對來看,手勢追蹤技術能夠降低VR手柄學習成本,也無需擔心手柄沒電等情況,應用到企業培訓或教育領域有巨大潛力。
與此同時,上個月我們還發布《這裡有最全的Oculus Quest手勢追蹤設計指南》一文,詳解介紹了手勢應用開發細節,并通過一些經過驗證的開發技巧為開發者帶來一些靈感。
在功能尚未正式開放之前,我們先通過一些案例來了解一下,Oculus Quest手勢追蹤功能的代表性項目。
VR彈吉它
開發者Ricardo Acosta利用業餘時間,開發了一款面向Oculus Quest的可通過手勢彈吉他的VR應用:《Air Guitar》。
據悉,他本職工作則是在微軟,此前也參與VR創作應用《Maquette》開發。而這款應用則是利用下班時間個人獨自開發完成的。
《Air Guitar》項目還處于初期階段,還有存在很多不完美,并未上架SideQuest。但是,這種新穎的方式有着更大的潛力,此前也有類似的手勢談鋼琴應用。另外,考慮到這是一款涉及到音樂的遊戲,音樂版權也需要考慮到位。
開發者Ricardo Acosta表示:目前正計劃将《Air Guitar》項目上線到衆籌平台Kickstarter中,之後有消息我們也會持續關注報道。
VR談鋼琴
《VRtuos》是一款支持VR透視模式的彈鋼琴應用,現已上架SideQuest。這款應用的特點是結合将虛拟鋼琴和真實鋼琴進行模型對比,然後在VR中顯示滑落音符,VR不會發出聲音,而是通過你的真實操作匹配鋼琴聲音,還原度很高。
更有趣的是,《VRtuos》在VR内顯示了音符滑落過程,内部顯示和俄羅斯方塊、手遊《節奏大師》類似,可以讓你知道何時按哪個音符,需要按多久等。
目前它也有一些bug,例如不能進行較大幅度的操作,但顯然這給VR樂器學習打開了一個新的方式,随着追蹤穩定性的提升,我們能夠遇見未來VR手勢應用場景将更為廣泛。
《Waltz of the Wizard》手勢玩法
VR模拟類遊戲《Waltz of the Wizard》也展示了加入手勢追蹤的玩法,從視頻來看不僅比用手柄更好玩,遊戲對手勢的反應識别也足夠靈敏。
在視頻中,可以看到玩家可用手勢點燃煙火、握住魔藥瓶、擺弄物品、隔空寫字、隔空取物等等,用手勢取代手柄後,會讓人感覺自己更像是在使用魔法。
目前該作的手勢識别功能進行開發調試,同時開發商表示:手勢識别是正在探索中的功能,Oculus對于優化手勢識别和第三方支持有自己的安排,這也将是決定《Waltz of the Wizard》支持手勢識别的較大因素,意味着支持手勢幾乎還要等一段時間。
VR音樂探索遊戲
可視化音樂遊戲《Trippy Fingers》是一款主打色彩變化的應用,當你伸出雙手後,就會有五彩斑斓的彩色紙屑,而且是随着你的手指移動而變得美輪美奂。
可能你會問,這款遊戲和音樂有什麼關系?首先,你可以通過手勢切換歌曲,例如輕擊手指三次即可切換音樂,旋轉手指調節音量,将拳頭握緊即可暫停播放,整體操作非常有趣,其次場景内顔色變化也會随着音樂而變化。想在VR内放松心情,《Trippy Fingers》再合适不過。
因此,《Trippy Fingers》的魅力就在于将手勢追蹤、音樂遊戲、可視化變幻界面結合,缺一不可。
VR趣味探索應用
開發者Felix Herbst發布一款支持Quest手勢識别功能的VR遊戲:Interdimensional Matter,目前已上架SideQuest上。該作畫風、配樂和玩法都相當無厘頭,本質上是一個通過排列對齊物體通關的遊戲,不過玩起來似乎并不簡單。
在該作中,你需要協調雙手去移動物體,在對齊完成後,點擊右下角的粉色按鈕進行下一關。難點在于,在将物體移動到一個位置後,它甚至還有自己跑掉的可能,并不會完全固定,而且随着關卡越來越難,你會發現排列物體越來越難,而且數量越來越多。與此同時,遊戲并不會提示你擺放的是否正确。甚至,即使你隻是胡亂擺弄一通,也可以按鈕通關。
目前隻是一個簡單的概念應用,整個遊戲體驗大約隻持續5分鐘就能完成。盡管玩法并不簡單,但比SideQuest上許多其他遊戲對手勢追蹤的效果要更好。
VR手勢悠悠球
個人開發者Daniel Beauchamp,此前公開了一些基于Oculus Quest開發的小Demo,其中包括:VR悠悠球、手掌追蹤功能等。
溜溜球可使單個溜溜球,手掌操控流暢,且動作都很自然。同時遊戲内的繩子可以通過手勢進行交互。甚至還可以将多個溜溜球綁在同一個手掌上,整體的運動軌迹看上去非常自然,比遊戲手柄操控看不出太多差别。
Daniel Beauchamp還有另外一些手勢項目,例如這個通過兩個手指進行滑行的操作就非常有趣,預計後續可以進行更多嘗試。
另外,還有一些有趣的VR手勢應用本文中并未介紹到,感興趣的朋友可以在青亭網官網搜索“手勢”關鍵詞了解更多。
,