在創(chuàng)建沉浸式虛擬環(huán)境時(shí),用戶希望體驗(yàn)盡可能逼真。盡管 AIO 耳機(jī)為 VR 用戶提供了移動(dòng)性和自由度,但這些耳機(jī)并不總是具有足夠的功率,能夠以精確的物理和照明來(lái)渲染逼真的場(chǎng)景。
使用云和專(zhuān)業(yè) GPU ,您可以為沉浸式環(huán)境生成逼真的圖形。NVIDIA CloudXR提供了兩全其美,包括增強(qiáng)的移動(dòng)性和NVIDIA RTXGPU的功能:
通過(guò)連接 NVIDIA GPU 增強(qiáng)耳機(jī)的 VR 體驗(yàn)
通過(guò) NVIDIA RTX 技術(shù),將 AI、真實(shí)感渲染和精確物理帶入 VR 環(huán)境
通過(guò)適度的計(jì)算在設(shè)備上實(shí)現(xiàn)高質(zhì)量的顯示,以創(chuàng)造更大的沉浸感
進(jìn)一步了解在使用 NVIDIA RTX GPU 的 PC 上構(gòu)建 XR 應(yīng)用程序時(shí)可以體驗(yàn)到的三大好處。
使用高保真度模型、幾何圖形和材質(zhì)
大多數(shù)開(kāi)發(fā)人員創(chuàng)建的虛擬現(xiàn)實(shí)環(huán)境可以在任何平臺(tái)上無(wú)縫運(yùn)行。但在許多情況下,需要更高級(jí)別的圖形逼真度。
VR 場(chǎng)景的圖形質(zhì)量或復(fù)雜性對(duì)體驗(yàn)的有效性有著巨大的影響。例如,為手術(shù)室場(chǎng)景進(jìn)行虛擬培訓(xùn)或運(yùn)行數(shù)字孿生是非常復(fù)雜的。這些場(chǎng)景中的大量物體需要只有 PC 才能提供的計(jì)算機(jī)能力。
通過(guò)使用 GPU 創(chuàng)建這些復(fù)雜的環(huán)境,您可以將圖形體驗(yàn)提升到新的水平。在 PC 上開(kāi)發(fā)應(yīng)用程序可以實(shí)現(xiàn)更高的保真度和信息深度,以及更大的、完全動(dòng)態(tài)的環(huán)境。NVIDIA RTX 提供了速度、性能和海量?jī)?nèi)存的組合,使 VR 應(yīng)用程序能夠在真實(shí)感環(huán)境中輕松處理大型復(fù)雜模型。
例如, Brightline 的開(kāi)發(fā)人員使用場(chǎng)景生成器創(chuàng)建了一個(gè)多用戶、動(dòng)態(tài)的培訓(xùn)系統(tǒng)。由于內(nèi)容的完全動(dòng)態(tài)性和講師驅(qū)動(dòng)性,以及環(huán)境的真實(shí)性, Brightline 的團(tuán)隊(duì)能夠使用 NVIDIA RTX ,將更多的時(shí)間集中在功能性和準(zhǔn)確性上,而在優(yōu)化和圖形快捷方式上花費(fèi)更少的時(shí)間,以在移動(dòng)設(shè)備上可用的適度計(jì)算上達(dá)到 VR 幀速率。
Brightline 通過(guò)無(wú)線連接使用 NVIDIA CloudXR,允許使用準(zhǔn)確和動(dòng)態(tài)的照明進(jìn)行全尺寸渲染,同時(shí)還具有 AIO 設(shè)備提供的無(wú)線自由和內(nèi)外跟蹤功能。
Brightline 首席創(chuàng)意技術(shù)專(zhuān)家 Jason Powers 表示:“借助 NVIDIA CloudXR,我們能夠在邊緣利用 NVIDIA RTX GPU,因此,使用 AIO 耳機(jī)或其他資源受限設(shè)備的用戶可以體驗(yàn)到一個(gè)精確照明的動(dòng)態(tài)世界?!?/p>
使用從反射到折射的高質(zhì)量照明創(chuàng)建圖形
通過(guò)充分利用最新的 GPU、 SDK 和 API,您可以開(kāi)發(fā)具有最高視覺(jué)逼真度的應(yīng)用程序。您可以使用高級(jí)技術(shù)(如NVIDIA DLSS和NVIDIA RTXGI)通過(guò)實(shí)時(shí)光線跟蹤創(chuàng)建具有真實(shí)照明、難以置信的反射和精確陰影的 XR 環(huán)境。
團(tuán)隊(duì)還可以使用基于物理的渲染(PBR)著色器和材質(zhì),使用諸如凹凸貼圖、環(huán)境光遮擋和粗糙度貼圖等技術(shù),為生活帶來(lái)更精細(xì)的細(xì)節(jié)。通過(guò) NVIDIA RTX 和 NVIDIA CloudXR,這些 XR 體驗(yàn)可以從云端進(jìn)行流式傳輸,因此您不必?fù)?dān)心用戶從較舊的工作站運(yùn)行體驗(yàn)。
許多開(kāi)發(fā)人員已經(jīng)在使用這些技術(shù)來(lái)實(shí)現(xiàn)高質(zhì)量的圖形。例如, Agile Lens 的團(tuán)隊(duì)依賴(lài)于虛幻引擎等強(qiáng)大的引擎,它為 PC VR 體驗(yàn)提供了高級(jí)功能。在 ViveCon 的一個(gè)項(xiàng)目中, Agile Lens 為 Vive Focus 3 AIO 設(shè)備構(gòu)建了 MetaHuman 演示。該項(xiàng)目包括大量的工作,以開(kāi)發(fā)一種使角色和劇院環(huán)境看起來(lái)和運(yùn)行良好的方法。但當(dāng)他們使用 NVIDIA CloudXR 時(shí),團(tuán)隊(duì)可以很容易地回到數(shù)字人和環(huán)境的最高質(zhì)量版本。他們展示了兩種體驗(yàn):一種是通過(guò)本地網(wǎng)絡(luò)連接到現(xiàn)場(chǎng)的臺(tái)式電腦上運(yùn)行,另一種是從云端無(wú)線傳輸。最終沒(méi)人能把這兩種區(qū)分開(kāi)來(lái)。
“從觀眾的角度來(lái)看,在虛幻引擎 5 中使用 RTXGI 和 DLSS 在高保真環(huán)境中體驗(yàn)真人模擬的 MetaHumans 是一次令人驚嘆的體驗(yàn),” Agile Lens 沉浸式設(shè)計(jì)首席執(zhí)行官 Alex Coulombe 表示,“在開(kāi)發(fā)者方面,我們可以自由地知道,每一個(gè)觀看該節(jié)目的人都會(huì)從一臺(tái)配有NVIDIA RTX A6000的云虛擬機(jī)的完美副本中獲得他們的體驗(yàn),這意味著強(qiáng)大的配置是唯一一個(gè)必須進(jìn)行測(cè)試的配置,任何人都不會(huì)被限制在 10 年前的筆記本電腦上運(yùn)行體驗(yàn)?!?/p>
圖片:在 Quest 和桌面 VR 上運(yùn)行的虛幻引擎 5.1 相同的 Nanite 地圖(來(lái)源:Agile Lens )開(kāi)發(fā)具有增強(qiáng)的基于 AI 的交互的環(huán)境
結(jié)合 AI 和 XR,用戶可以在沉浸式環(huán)境中進(jìn)行交互,就像在現(xiàn)實(shí)世界中一樣。今天的開(kāi)發(fā)人員正試圖準(zhǔn)確地表示沉浸式環(huán)境,并使交互盡可能自然,以提高用戶的舒適度和生產(chǎn)力。
Aurora 項(xiàng)目是專(zhuān)門(mén)構(gòu)建的 NVIDIA 平臺(tái)的一個(gè)例子,其中人工智能驅(qū)動(dòng)的虛擬輔助將集成在 XR 環(huán)境中。用戶還可以與現(xiàn)實(shí)的 AI 化身進(jìn)行交互,以獲得更具吸引力的交互體驗(yàn)。借助 AI 技術(shù),3D 角色可以看到、聽(tīng)到、理解和與人交流。使用NVIDIA Omniverse Avatar Cloud Engine(ACE)等解決方案,您可以輕松定制和部署交互式化身。
Omniverse ACE 是一套云原生 AI 微服務(wù),可以更輕松地大規(guī)模構(gòu)建和部署智能虛擬助理和數(shù)字人。這些交互式化身可以為游戲、娛樂(lè)、交通和酒店等行業(yè)的組織設(shè)計(jì),使團(tuán)隊(duì)能夠增強(qiáng)現(xiàn)有工作流程并打開(kāi)新的商機(jī)。
未來(lái),基于 AI 的內(nèi)容將在 XR 體驗(yàn)中變得更加突出。從合成數(shù)據(jù)生成到圖像識(shí)別,人工智能將幫助您構(gòu)建充滿物理精確細(xì)節(jié)和照片級(jí)真實(shí)感圖形的沉浸式內(nèi)容。新技術(shù)將使人工智能能夠更好地理解真實(shí)世界的內(nèi)容,從而為虛擬世界創(chuàng)建合成版本。
更多信息可以來(lái)這里獲取==>>電子技術(shù)應(yīng)用-AET<<