時(shí)間:2022-02-25|瀏覽:508
當(dāng)你戴著 Oculus Quest 2 頭顯,進(jìn)入 Meta 的 VR 社交平臺(tái) Horizon Worlds 你需要?jiǎng)?chuàng)建一個(gè)代表自己的虛擬圖像。
但它看起來(lái)不像你,它沒(méi)有下半身,像霍格沃茨的幽靈一樣漫游在空中,最近漂浮在超級(jí)碗的廣告中。
Horizon Worlds.
隔壁的微軟也是如此,在元宇宙入口 Mesh for Teams 中間,你的虛擬形象也失去了腿。
Mesh for Teams.
然后你脫口而出一個(gè)問(wèn)題:為什么沒(méi)有腿?
加腿這么難?
Andrew Bosworth 是 Meta 的 Reality Labs 副總裁,在領(lǐng)導(dǎo)公司 XR 部門(mén)時(shí),他養(yǎng)成了通過(guò) Instagram 即興問(wèn)答的習(xí)慣。在 2 月 10 日的問(wèn)答中,他承認(rèn)加腿很難。
Andrew Bosworth.
如果想在 VR 以逼真的方式呈現(xiàn)雙腿首先要知道腿在現(xiàn)實(shí)中的一舉一動(dòng),然后推斷腿在 VR 應(yīng)該做什么?
雖然 Quest 2 可以跟蹤頭部和手部,估計(jì)手臂和胸部的位置,但它不知道你的腿在哪里。
Quest 2 配備了 4 廣角灰度攝像頭,頂部的兩個(gè)朝上和側(cè)面,底部的兩個(gè)略向下。如果我們向前看,這些相機(jī)通??梢钥吹绞直郏绻覀冏蛳蛳驴?,相機(jī)可以看到身體的更多部分。
但它們的跟蹤范圍總是有限的。有時(shí),腹部等「障礙物」它可能會(huì)阻擋相機(jī)的視線(xiàn);有時(shí),當(dāng)我們傾斜或轉(zhuǎn)動(dòng)頭部時(shí),向下的相機(jī)看不到腿。
Meta 還想讓頭部顯示的形狀尺寸更小,相機(jī)可能更難看到腿。
在腿上放一個(gè)額外的傳感器怎么樣?理論上是可行的,但目前腿上幾乎沒(méi)有商用傳感器和控制器。
HTC 主要為企業(yè)用戶(hù)銷(xiāo)售幾種 Vive VR 頭部顯示器還配備了綁在四肢或物體(如網(wǎng)球拍)上的跟蹤器。然而,跟蹤器只能與連接到計(jì)算機(jī)的頭部顯示器兼容,并需要一個(gè)基站。
HTC VIVE.
說(shuō)到基站,「無(wú)腿」核心原因即呼之欲出,即 Quest 2 定位方法。VR 頭顯定位技術(shù)可分為兩類(lèi),一類(lèi)是 outside-in,一種是 inside-out。
Outside-in 需要提前放置定位點(diǎn)設(shè)備。定位點(diǎn)設(shè)備將發(fā)射激光、紅外線(xiàn)、可見(jiàn)光等,覆蓋定位點(diǎn)設(shè)備之間的空間,建立三維位置信息,確定佩戴者的位置和移動(dòng)方向。
Quest 2 則屬于 inside-out,在 VR 頭部顯示器攝像頭,讓設(shè)備檢測(cè)外部環(huán)境的變化,然后使用 SLAM 算法計(jì)算攝像頭的空間位置和移動(dòng)方向。
簡(jiǎn)單來(lái)說(shuō),inside-out 定位不需要基站,擴(kuò)大了使用空間,更適合日常娛樂(lè)和移動(dòng)場(chǎng)景;outside-in 可以提供更準(zhǔn)確、更大范圍的跟蹤效果,全身動(dòng)捕一般依賴(lài) outside-in實(shí)現(xiàn) 跟蹤設(shè)置。
既然目前做不到全身追蹤,Meta 腰部以下「砍掉」了。
定位也與使用習(xí)慣和公司的戰(zhàn)略方向有關(guān)——科技發(fā)展越方便越好,消費(fèi)者不一定關(guān)心公司使用的技術(shù)。起價(jià)是299美元Quest 2 雖然精度和延遲相對(duì)落后,但對(duì)普通用戶(hù)足夠友好。
在 VR 中國(guó)經(jīng)營(yíng)社交網(wǎng)絡(luò),是很多 VR 制造商的目標(biāo)。
Meta當(dāng)然, 希望進(jìn)一步VR 推向大眾消費(fèi)市場(chǎng)。更逼真的身體表現(xiàn)可能會(huì)導(dǎo)致更多的人對(duì) VR 的興趣也可能使用戶(hù)體驗(yàn)更加繁瑣和昂貴,至少在短期內(nèi)。
所謂「兩害取其輕」,使用門(mén)檻較低, VR 意義重大。
值得一提的是,Unity 增強(qiáng)和虛擬現(xiàn)實(shí)副總裁 Timoni West 在 AI 在頭顯檢測(cè)到的頭部運(yùn)動(dòng)的幫助下,預(yù)測(cè)腿部運(yùn)動(dòng)。
AI具體用戶(hù)的每一個(gè)動(dòng)作都可能無(wú)法準(zhǔn)確預(yù)測(cè),導(dǎo)致 AI 再現(xiàn)動(dòng)作不自然;「收集大量步行數(shù)據(jù)」這個(gè)前提并不容易。在未來(lái)的某個(gè)時(shí)候,每個(gè)家庭都有一臺(tái)全向跑步機(jī)來(lái)捕捉腿部運(yùn)動(dòng),制作人體運(yùn)動(dòng)的數(shù)字模型可能不再困難。
簡(jiǎn)而言之,如果不在身體或周?chē)O(shè)置一系列傳感器,則需要消費(fèi)級(jí)一體化 VR 基本上不可能實(shí)現(xiàn)完美的腿部跟蹤,就像 HTC 美國(guó)公司總經(jīng)理 O'Brien 所說(shuō):
每個(gè)人都在追求沉浸式的體驗(yàn),可以用一個(gè)集成的頭來(lái)再現(xiàn)身體的每一個(gè)動(dòng)作。但我們還是做不到。
你想跳舞嗎?
9 月,2019年,Meta 宣布在 Oculus Quest 使用深度神經(jīng)網(wǎng)絡(luò)準(zhǔn)確跟蹤手部。
戴著 Quest 2,我們可以揮動(dòng)手部在菜單界面進(jìn)行一些簡(jiǎn)單操作,也可以握著手柄在游戲里大殺四方。
在 Horizon Worlds,漂浮的「無(wú)腿怪」人們可以閑逛,結(jié)交朋友,向僵尸開(kāi)槍?zhuān)蛘邉?chuàng)造自己的世界。
為什么準(zhǔn)確的手跟蹤很重要?因?yàn)樗鼘⒔怄i一系列新的體驗(yàn)——手勢(shì)在 VR 暫停電影,在社交游戲中更自然地表達(dá)自己,揮手打招呼、猜拳、握手、抓取、擊掌……
相比之下,如果你不需要舞蹈和其他游戲用途,腿部跟蹤似乎是不必要的。即使沒(méi)有腿部跟蹤,軟件也可以模擬行走、蹲著等動(dòng)作,讓你看起來(lái)「全須全尾」。
讓步行在 VR 更逼真,有研究人員推出腳 VR 力反饋方案。例如,行走時(shí)的身體感覺(jué)包括視覺(jué)場(chǎng)景的變化、腳底踩在地上的反饋和四肢運(yùn)動(dòng)的身體感覺(jué)。因此,理論上,通過(guò)刺激和模擬這些身體感覺(jué)和視覺(jué)效果,也可以模擬現(xiàn)實(shí)的行走體驗(yàn)。
假如只是不習(xí)慣,假裝「假腿」足夠了。Andrew Bosworth 就是這么想的:
我們可以偽造虛擬形象的腿,讓人們看到彼此的完整形象,沒(méi)有人會(huì)知道區(qū)別。
當(dāng)然,Andrew Bosworth 還承認(rèn)假腿不能代替真腿的體驗(yàn)。假腿只能在閑逛、聊天等簡(jiǎn)單的 VR 在社交體驗(yàn)中,讓你漂浮的虛擬形象看起來(lái)更自然。
但是沒(méi)有一雙靈活的腿,總覺(jué)得少了什么。在更沉浸和真實(shí)的 VR 在經(jīng)驗(yàn)中,我們總是需要腿。這方面的代表是 VR 社交平臺(tái) VRChat。
VRChat.
VRChat 的一個(gè)主要特點(diǎn)是虛擬角色不受限制,二次元被稱(chēng)為 MMD 模型可直接轉(zhuǎn)換為 VRChat 的角色,卡比獸,海綿寶寶,未來(lái)的初音。不僅如此,越來(lái)越多的 VR 舞者通過(guò)綁在身上的運(yùn)動(dòng)追蹤器,在這里進(jìn)行實(shí)時(shí)斗舞比賽。
為了在 VR 全身舞蹈動(dòng)作完成,韓國(guó) VRChat 舞者 Makoto 使用的追蹤器特別齊全: ,帶有無(wú)線(xiàn)附加組件HTC Vive 頭顯、手腕上的 Index 控制器和腰腳 Vive Tracker。
Makoto.
VR 愛(ài)好者愿意為全身跟蹤付出大量的金錢(qián)和精力,這意味著他們有「真腿」門(mén)檻還是很高的。
但從長(zhǎng)遠(yuǎn)來(lái)看,社區(qū)是圍繞這些活動(dòng)形成的,甚至是國(guó)際舞蹈協(xié)會(huì)(IDA)也在 VRChat 舉辦了一系列錦標(biāo)賽舞蹈比賽,VR 真正遠(yuǎn)程連接的人可能永遠(yuǎn)不會(huì)見(jiàn)面。
我們?nèi)匀黄诖夹g(shù)變得更好、更便宜,VR 能提供更多意想不到的體驗(yàn)。
或許從「為什么沒(méi)有腿」這個(gè)問(wèn)題可以看出,與扎克伯格的元宇宙概念相比,現(xiàn)在 VR 技術(shù)還有一些距離,Horizon Worlds 不是一個(gè)完全完整的元宇宙。
話(huà)說(shuō)回來(lái),也許不是每個(gè)人都喜歡腿,也不是每個(gè)人都想做一個(gè)虛擬形象來(lái)反映他們的日常生活。
至少,未來(lái)每個(gè)人都能觸及的 VR 世界,要讓「漂浮的無(wú)腿怪」成為一種選擇,而不是一種遺憾。
熱點(diǎn):元宇宙 數(shù)據(jù) 計(jì)算機(jī)