從2016年起,VR/AR一直被預(yù)言“即將爆發(fā)”,卻始終沒(méi)有擺脫小眾技術(shù)的身份。最主要的原因是體驗(yàn)不佳、價(jià)格昂貴、應(yīng)用面窄。可以說(shuō),5G是VR等待已久的契機(jī),大帶寬低時(shí)延能大幅提升畫(huà)質(zhì)和刷新率。云和終端的實(shí)時(shí)聯(lián)動(dòng)將解決大體量渲染問(wèn)題,為XR終端減少計(jì)算單元、實(shí)現(xiàn)輕量化和高性價(jià)比打下基礎(chǔ)。北京時(shí)間12月6日凌晨,高通在驍龍年度技術(shù)峰會(huì)的XR主題日發(fā)布了全球首個(gè)5G XR平臺(tái)驍龍XR2,通過(guò)集成XR、5G、AI能力,賦能5G時(shí)代的XR終端。有了5G專屬平臺(tái)的加持,VR能否打響期待已久的翻身仗?

在為期三天的驍龍年度技術(shù)峰會(huì),高通專門留出一天會(huì)期介紹XR產(chǎn)品和方案,體現(xiàn)了高通對(duì)XR技術(shù)的信心和重視。高通產(chǎn)品管理副總裁及XR業(yè)務(wù)負(fù)責(zé)人Hugo Swart表示,包含VR、AR、MR的XR是下一代移動(dòng)計(jì)算平臺(tái),高通對(duì)VR/AR的研究已有十年之久,目前搭載驍龍芯片的XR終端已有三十多款。他表示,XR已經(jīng)走進(jìn)了我們的生活,在制造、娛樂(lè)、游戲、健康、教育、工業(yè)、零售、旅行等多個(gè)領(lǐng)域發(fā)揮作用。XR的應(yīng)用不止于電影、游戲,它正在走進(jìn)B端。本次峰會(huì),高通攜Unity、 Mitchell汽車?yán)碣r、埃森哲、德國(guó)電信等企業(yè)合作伙伴,展示了驍龍平臺(tái)對(duì)企業(yè)級(jí)XR應(yīng)用的支持。
例如,Mitchell公司現(xiàn)場(chǎng)指出,AR正在汽車的安全駕駛和維修中發(fā)揮作用。例如豐田通過(guò)AR讓拖車司機(jī)看到車斗后面的路段,奔馳用AR情境感知檢測(cè)車輛轉(zhuǎn)彎時(shí)的路況環(huán)境。而AR技術(shù)已經(jīng)應(yīng)用于汽車巡檢,員工戴上AR眼鏡,用攝像頭掃描車體發(fā)現(xiàn)問(wèn)題,再根據(jù)問(wèn)題自動(dòng)將檢修步驟投射到AR眼鏡,提升了維修效率。德國(guó)電信開(kāi)發(fā)了AR Advisor,讓員工從“低頭做事”變成“抬頭平視”,提升了企業(yè)運(yùn)行效率。
“我們想強(qiáng)調(diào)的是,XR在B端C端市場(chǎng)都有很多機(jī)會(huì),高通提供的是橫向的平臺(tái)技術(shù)支持,在兩個(gè)領(lǐng)域都有良好的客戶群,但是在企業(yè)領(lǐng)域可能有很多好的應(yīng)用是我們還沒(méi)有注意到的,所以我們今天做了重點(diǎn)的展示!盚ugo Swart說(shuō)。
XR2兼具5G、AI能力

2018年,高通推出了第一款VR/AR專用芯片平臺(tái)XR1,時(shí)隔一年發(fā)布的驍龍XR2相比XR1進(jìn)步不小,F(xiàn)場(chǎng)公布的數(shù)據(jù)顯示,對(duì)比XR1,XR2帶來(lái)了2倍的CPU和GPU性能提升、4倍視頻帶寬提升、6倍分辨率提升和11倍AI性能提升。
值得注意的是,驍龍XR2平臺(tái)支持七路并行攝像頭,實(shí)現(xiàn)對(duì)用戶的頭部、眼部、手部、表情、身體、環(huán)境、控制器的追蹤。此外,該平臺(tái)還是首個(gè)通過(guò)支持低時(shí)延攝像頭透視的XR平臺(tái),讓用戶可以在佩戴VR設(shè)備時(shí),在虛擬與現(xiàn)實(shí)融合的世界進(jìn)行觀察、交互和創(chuàng)作。為了滿足沉浸式XR體驗(yàn)的需求,在基礎(chǔ)的AI和可選的5G連接支持之上,XR2對(duì)視覺(jué)、交互和音頻技術(shù)方面進(jìn)行了定制優(yōu)化。
在視覺(jué)方面,XR2的GPU實(shí)現(xiàn)了1.5倍像素填充率和3倍紋理速率,具備眼球追蹤的視覺(jué)聚焦渲染和支持更流暢刷新率的增強(qiáng)可變速率著色等XR專屬特性,可以在渲染重負(fù)載工作的同時(shí)保持低功耗。驍龍XR2的顯示單元可支持90fps的3Kx3K單眼分辨率,也是首個(gè)在流傳輸和本地播放中支持60fps的8K 360度視頻。針對(duì)AR顯示特別開(kāi)發(fā)的定制芯片可幫助減少整體系統(tǒng)時(shí)延,以實(shí)現(xiàn)沉浸式的AR體驗(yàn)。
在交互方面,XR2基于七路攝像頭對(duì)用戶的頭部、嘴唇和眼球進(jìn)行追蹤,并且支持26點(diǎn)手部骨骼追蹤,提供高效的場(chǎng)景理解和3D重建。在音頻方面,XR2提供語(yǔ)音交互以深化沉浸感。該平臺(tái)包含一個(gè)定制的始終開(kāi)啟的、低功耗的DSP,支持諸如語(yǔ)音激活和情境偵測(cè)等硬件加速特性,幫助用戶進(jìn)入數(shù)字世界的同時(shí),也能聽(tīng)到真實(shí)世界的聲音。
基于AI和5G能力,XR2能夠通過(guò)支持終端和邊緣云之間的分離式處理營(yíng)造更加逼真的高品質(zhì)體驗(yàn),從而擺脫線纜或空間對(duì)XR設(shè)備的束縛。
雖然高通在2018年推出了XR1平臺(tái),但除了大朋、3Glasses,大多數(shù)VR設(shè)備廠商并沒(méi)有搭載XR1,而是基于驍龍835、845打造芯片。XR2是否會(huì)重復(fù)XR1的局面,無(wú)法與自家的手機(jī)芯片抗衡呢?
對(duì)此,Hugo Swart在接受《中國(guó)電子報(bào)》記者采訪時(shí)表示 ,高通將XR分為兩個(gè)細(xì)分市場(chǎng),一個(gè)是高端市場(chǎng),也就是XR1的主攻市場(chǎng);一個(gè)是頂級(jí)市場(chǎng),也就是選擇驍龍835、845打造VR設(shè)備的市場(chǎng)。中國(guó)廠商愛(ài)奇藝、Nreal、Pico、影創(chuàng)等廠商,都是基于835、845開(kāi)發(fā)VR設(shè)備的高階玩家。他預(yù)期,原先使用驍龍835、845的玩家都會(huì)遷移到XR2平臺(tái)。但是,高通也會(huì)繼續(xù)提供XR1芯片,因?yàn)橹袊?guó)仍有廠商在基于XR1開(kāi)發(fā)設(shè)計(jì)他們的產(chǎn)品。
“高通做XR的出發(fā)點(diǎn)首先是把XR市場(chǎng)做起來(lái)。XR平臺(tái)給整個(gè)生態(tài)系統(tǒng)都帶來(lái)豐富的機(jī)會(huì),希望除了硬件廠商,致力于空間計(jì)算等領(lǐng)域的互聯(lián)網(wǎng)公司也能參與進(jìn)來(lái),一起搭建生態(tài)系統(tǒng),一起推進(jìn)XR平臺(tái)建設(shè),抓住XR平臺(tái)的機(jī)會(huì)!盚ugo Swart說(shuō)。