(映維網Nweon 2022年04月20日)Meta日前就Quest 2的裸手交互功能發布了“重大更新”,為Presence Platform的手部追蹤帶來2.0版本,涵蓋追蹤連續性、手勢支持和和性能等方面的“階躍式優化”。另外,所述迭代同時允許快速和重疊手部動作,支持鼓掌及其他手遮手交互,從而實現了幾乎無窮無盡的對象操縱可能性。
為了幫助你在無控制器的虛擬現實中構建自然和沉浸的裸手交互,以及為Quest 2和未來設備提供關鍵的優化,團隊通過全新的計算機視覺和機器學習方法重新設計了手部追蹤技術。主要包括:
1. 追蹤連續性的階躍式優化
當系統丟失手部的追蹤時,體驗會令用戶感到沮喪。所以改善所述問題成為了團隊的首要任務。對于這一版本,Meta在手部追蹤連續性方面實現了階躍式優化,從而為日常使用帶來了更好的沉浸感和一致的雙手體驗。這意味著你可以少花時間擔心可靠性,多花時間為應用程序實現獨特的交互。
2. 穩健的遮擋、更快的移動和全新的手遮手交互
團隊開發了一種應用深度學習的全新方法。當設備的攝像頭看不到完整的手或當手快速移動時,系統將可以更好地理解手部的姿態,從而支持需要強大追蹤和復雜手勢的應用程序,包括:
追蹤的手遮手交互,比如鼓掌或擊掌。 當其他手指被手掌擋住時,系統能夠更準確地表示豎起大拇指的手勢。3. 更好的手勢識別
全新的手部追蹤技術現在可以持續識別你想要使用的最重要手勢。通過改進的捏、抓和戳識別,你可以期望更少的意外丟失。另外,對于實現了Interaction SDK中的任何手勢的應用程序,以及你在應用程序中內置的任何自定義手勢,你都能夠看到顯著的提升。無論拿起一個虛擬物品,擊打一個拳擊袋,還是演奏一種樂器,新版本都更將幫助你更接近于在虛擬現實中無縫復刻自然的手部動作。
上面的視頻演示了用于握持虛擬對象的“抓”手勢識別。你可以看到1.0版本和2.0版本之間的變化。
Meta表示,這一裸手交互的2.0更新將從今天開始鋪開。如果開發者已經在應用程序中內置了手部追蹤功能,你不需要改動任何API調用。但當然,它不會自動啟用。對于Native,你可以在Android Manifest文件中添加以下element來選擇加入:。至于Unity和Unreal,你可以參考屆時提供的文檔說明。
《Cubism》的開發者表示:“這一手部追蹤更新是裸手追蹤質量的一大進步,現在用雙手暢玩《Cubism》感覺更加穩定和一致。以前,《Cubism》的手部追蹤依賴于平滑手部數據輸入來產生穩定的輸入方法。另外,你需要向玩家強調不要交叉手部,因為這會對追蹤產生負面影響。現在,新版本已經改善了所有這一切,其一致性足以讓我在默認情況下關閉手部平滑功能。”
《Unplugged: Air Guitar》的開發者指出:“對我們來說,這一手部追蹤更新是一件非常重要的事情。《Unplugged: Air Guitar》大量使用手部追蹤來實現真實的吉他游戲感,并且它涉及許多快速的手部動作和快速的和弦變化。從一開始,我們就想讓玩家感覺他們在玩真正的吉他。對于舊版本的手部追蹤,盡管我們成功地實現了非常可靠和準確的游戲,但我們不得不為游戲設置一定的限制,從而提供一種順暢的體驗。對于最新的版本,手部追蹤非常準確,反應迅速,我們可以包括所有以前無法實現的額外功能:快速改變手指位置,增加更真實的和弦數量等等。”
《Liteboxer》的開發者則評論道:“這一手部追蹤更新無疑提高了我們為《Liteboxer》用戶提供完美訓練體驗的能力。我們的訓練需要大量的快速出拳,手部追蹤必須跟上嚴格的節奏。我們對最新的更新感到非常滿意,并對手部追蹤在Quest平臺的總體發展方向感到興奮。”
值得一提的是,團隊表示Presence Platform未來將增加更多的功能與優化,從而幫助開發者創造一個真正的互聯互通世界。
責任編輯:Rex_08