VR 耳機(jī)的透視技術(shù)可以實(shí)現(xiàn)早期 MR 體驗(yàn)，還有助于開發(fā) MR 應(yīng)用程序所需的生態(tài)系統(tǒng)。深度感知在 MR 應(yīng)用中對(duì)于演示遮擋現(xiàn)象至關(guān)重要。VR VST 的當(dāng)前質(zhì)量勉強(qiáng)夠用，因?yàn)樗峭ㄟ^相機(jī)實(shí)現(xiàn)的。但是，這可以通過合并額外的 ToF 傳感器來改善。未來將有更多帶有 VST 的 VR 耳機(jī)，促進(jìn) MR 應(yīng)用程序數(shù)量的增加。iymesmc
虛擬現(xiàn)實(shí) (VR) 耳機(jī)使用實(shí)時(shí)六自由度 (DOF) 和視覺同時(shí)定位和映射 (SLAM) 來接收真實(shí)世界的信息，例如 3D 坐標(biāo)和對(duì)象識(shí)別。最初，該技術(shù)用于手部追蹤和 Guardian 系統(tǒng)。盡管如此，一些 VR 頭戴式設(shè)備包含來自單色相機(jī)的圖像，并且出人意料地將視頻透視 (VST) 的功能擴(kuò)展到混合現(xiàn)實(shí) (MR)。Meta 推出了Quest Pro VR耳機(jī)，而字節(jié)跳動(dòng)則推出了帶全彩攝像頭的 PICO4，以提供更逼真的 MR 應(yīng)用。iymesmc
當(dāng)前 VR 頭顯中使用的透視技術(shù)稱為 VST，而增強(qiáng)現(xiàn)實(shí)(AR) 設(shè)備中使用的透視技術(shù)稱為光學(xué)透視 (OST)。VST 技術(shù)將現(xiàn)實(shí)世界的數(shù)字化三維視圖與計(jì)算機(jī)生成的現(xiàn)實(shí)模擬相結(jié)合，然后顯示在不透明的顯示器上。通過使用 VST 以及適當(dāng)?shù)匿秩炯夹g(shù)和算法，可以實(shí)現(xiàn)虛擬和實(shí)際對(duì)象之間的交互和遮擋，以及重建物理世界的數(shù)字三維模型。iymesmc
與使用攝像頭獲得透視功能的 VR 耳機(jī)不同，AR 設(shè)備在制造時(shí)具有透視功能。AR 設(shè)備的 OST 功能允許虛擬圖像直接疊加在現(xiàn)實(shí)世界的視覺上。AR 設(shè)備中真實(shí)世界圖像的分辨率明顯高于 VR 頭顯。然而，當(dāng)前的 AR 設(shè)備允許與真實(shí)環(huán)境進(jìn)行相當(dāng)有限的交互，因?yàn)樵跊]有深度傳感器的情況下無法實(shí)現(xiàn)遮擋。iymesmc
VR VST的優(yōu)勢(shì)iymesmc
VR VST 技術(shù)允許用戶通過物理鍵盤、鼠標(biāo)、觸摸板或控制器與他們的環(huán)境進(jìn)行交互，而無需取下 VR 耳機(jī)。它甚至能夠在虛擬世界中創(chuàng)建昂貴的小工具，例如多個(gè)顯示器。展望未來，更多實(shí)驗(yàn)性的 AR 和 MR 功能可能會(huì)集成到 VR 耳機(jī)中，從而大大豐富此類設(shè)備的生態(tài)系統(tǒng)和實(shí)用性。iymesmc
當(dāng)前VR VST面臨的挑戰(zhàn)iymesmc
立體視覺和深度感知對(duì)于 MR 都至關(guān)重要。未來，配備飛行時(shí)間 (ToF) 傳感器的 VR 頭顯將能夠捕捉到比目前可用的配備攝像頭的頭顯更準(zhǔn)確的距離信息。iymesmc
VR 耳機(jī)的 VST 幾乎無法實(shí)現(xiàn)雙目視覺。其中一個(gè)原因是VR VST只有一個(gè)攝像頭，這使得近距離物體的距離測(cè)量變得困難。此外，視野中的物體仍然會(huì)發(fā)生翹曲和變形。未來的算法必須改進(jìn)這一點(diǎn)，否則設(shè)計(jì)者需要避免讓用戶感知距離較近的物品。此外，將需要更多的顏色和白平衡傳感器來對(duì)實(shí)際顏色進(jìn)行更逼真的近似。iymesmc
在VR的一個(gè)新穎應(yīng)用中，VST技術(shù)可以通過創(chuàng)建幾個(gè)虛擬顯示器來在虛擬世界中帶來多個(gè)顯示器。然而，當(dāng)前 VR 頭顯中虛擬顯示器的分辨率低于現(xiàn)實(shí)世界中的顯示器。不過，這個(gè)問題可以通過提高 VR 頭顯的分辨率來解決，但成本會(huì)更高。iymesmc
延遲是 VST VR 耳機(jī)的一個(gè)關(guān)鍵特性，因?yàn)樘幚砥鞅仨殞?duì)相機(jī)捕獲的圖像進(jìn)行編碼。因此，處理器的速度和帶寬將影響 VR 系統(tǒng)的性能，因?yàn)槲磥淼闹卸撕透叨?nbsp;VR 耳機(jī)將普遍支持 4K 視頻流。因此，VR頭顯SoC的要求應(yīng)該高于智能手機(jī)。 iymesmc
VR 頭顯中的 VST 技術(shù)可以模糊 VR 和 AR 之間的界限，使 VR 提供 MR 功能成為可能。除了游戲之外，MR 還可用于多種用途。它可用于學(xué)習(xí)平臺(tái)、用于運(yùn)動(dòng)目的、網(wǎng)絡(luò)研討會(huì)和制造業(yè)中的數(shù)字雙胞胎。雖然VR VST還有一些問題需要解決，但它可以降低MR應(yīng)用的進(jìn)入門檻。越來越多的用戶和開發(fā)人員采用有助于改進(jìn) VR 耳機(jī) VST 技術(shù)，這將導(dǎo)致創(chuàng)建更多 MR 應(yīng)用程序。反過來，這些 MR 應(yīng)用程序?qū)⑼苿?dòng) AR 硬件和生態(tài)系統(tǒng)的發(fā)展。畢竟AR設(shè)備有一些VR設(shè)備無法復(fù)制的優(yōu)勢(shì)。iymesmc
責(zé)編：EditorTiger
閱讀全文，請(qǐng)先
