![]()
蘋果面向Apple Vision Pro推送visionOS 26.4系統(tǒng)更新,核心新增VR注視點(diǎn)串流(Foveated Streaming)能力,并對(duì)混合現(xiàn)實(shí)空間音頻進(jìn)行關(guān)鍵優(yōu)化,大幅提升PC VR串流效率與空間音頻體驗(yàn)。
一、核心新功能:注視點(diǎn)串流,解鎖高效高畫(huà)質(zhì)VR串流
注視點(diǎn)串流是本次更新的核心突破,區(qū)別于注視點(diǎn)渲染:前者是對(duì)視線區(qū)域更高畫(huà)質(zhì)傳輸,后者是設(shè)備端對(duì)該區(qū)域更高分辨率渲染,二者可協(xié)同使用。
原理:頭顯解碼器分辨率與碼率有限,該技術(shù)優(yōu)先保障用戶注視區(qū)域的分辨率與壓縮質(zhì)量,邊緣區(qū)域適度優(yōu)化,在帶寬與算力受限場(chǎng)景下提升整體清晰度與流暢度。
技術(shù)特性:底層跨平臺(tái)框架,不局限于本地Mac,理論上任何PC VR服務(wù)器均可適配;蘋果與英偉達(dá)深度合作,集成CloudXR SDK,支持本地與云端PC串流。
隱私設(shè)計(jì):系統(tǒng)僅向開(kāi)發(fā)者提供用戶注視的粗略區(qū)域,不暴露精確眼動(dòng)數(shù)據(jù),兼顧隱私與功能實(shí)現(xiàn),這也是visionOS首次向開(kāi)發(fā)者開(kāi)放此類視線信息。
適配限制:CloudXR SDK僅支持英偉達(dá)Ada、Blackwell 架構(gòu),即RTX 40/50系列顯卡。
已落地應(yīng)用
模擬類:X-Plane 12、iRacing推出專屬visionOS客戶端,可自動(dòng)對(duì)接PC模擬、通過(guò)計(jì)算機(jī)視覺(jué)對(duì)齊座艙與外設(shè)并透過(guò)透視顯示外設(shè)。
工業(yè)設(shè)計(jì):Autodesk VRED新增沉浸式模式,已被起亞、寶馬、沃爾沃、Rivian用于高精度資產(chǎn)串流展示。
通用串流:第三方工具Clear XR上線TestFlight,支持串流任意 OpenXR VR游戲并啟用注視點(diǎn)串流。
二、空間音頻升級(jí):音頻光線追蹤更快更完整
Vision Pro自發(fā)布起支持音頻光線追蹤,可掃描環(huán)境材質(zhì)與結(jié)構(gòu),讓聲音匹配物理空間聲學(xué)特性。
visionOS 26.4進(jìn)一步優(yōu)化:
系統(tǒng)存儲(chǔ)并記憶房間聲學(xué)屬性,音頻光線追蹤可快速初始化,無(wú)需用戶先移動(dòng)頭顯即可建立完整環(huán)境聲學(xué)模型,混合現(xiàn)實(shí)音頻響應(yīng)更迅速、沉浸感更連貫。
三、總結(jié)
visionOS 26.4 以注視點(diǎn)串流為核心,打通Vision Pro與高性能PC /云端的高效VR內(nèi)容串流通道,兼顧隱私、性能與畫(huà)質(zhì);空間音頻的優(yōu)化則讓混合現(xiàn)實(shí)聽(tīng)覺(jué)體驗(yàn)更自然流暢。目前該更新已面向所有Vision Pro用戶推送,開(kāi)發(fā)者與高端用戶可快速體驗(yàn)全新串流與音頻能力。
「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明出處」
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.