從2016年起,VR/AR一直被預言“即將爆發(fā)”,卻始終沒有擺脫小眾技術的身份。最主要的原因是體驗不佳、價格昂貴、應用面窄?梢哉f,5G是VR等待已久的契機,大帶寬低時延能大幅提升畫質和刷新率。云和終端的實時聯(lián)動將解決大體量渲染問題,為XR終端減少計算單元、實現(xiàn)輕量化和高性價比打下基礎。北京時間12月6日凌晨,高通在驍龍年度技術峰會的XR主題日發(fā)布了全球首個5G XR平臺驍龍XR2,通過集成XR、5G、AI能力,賦能5G時代的XR終端。有了5G專屬平臺的加持,VR能否打響期待已久的翻身仗?

在為期三天的驍龍年度技術峰會,高通專門留出一天會期介紹XR產品和方案,體現(xiàn)了高通對XR技術的信心和重視。高通產品管理副總裁及XR業(yè)務負責人Hugo Swart表示,包含VR、AR、MR的XR是下一代移動計算平臺,高通對VR/AR的研究已有十年之久,目前搭載驍龍芯片的XR終端已有三十多款。他表示,XR已經走進了我們的生活,在制造、娛樂、游戲、健康、教育、工業(yè)、零售、旅行等多個領域發(fā)揮作用。XR的應用不止于電影、游戲,它正在走進B端。本次峰會,高通攜Unity、 Mitchell汽車理賠、埃森哲、德國電信等企業(yè)合作伙伴,展示了驍龍平臺對企業(yè)級XR應用的支持。
例如,Mitchell公司現(xiàn)場指出,AR正在汽車的安全駕駛和維修中發(fā)揮作用。例如豐田通過AR讓拖車司機看到車斗后面的路段,奔馳用AR情境感知檢測車輛轉彎時的路況環(huán)境。而AR技術已經應用于汽車巡檢,員工戴上AR眼鏡,用攝像頭掃描車體發(fā)現(xiàn)問題,再根據(jù)問題自動將檢修步驟投射到AR眼鏡,提升了維修效率。德國電信開發(fā)了AR Advisor,讓員工從“低頭做事”變成“抬頭平視”,提升了企業(yè)運行效率。
“我們想強調的是,XR在B端C端市場都有很多機會,高通提供的是橫向的平臺技術支持,在兩個領域都有良好的客戶群,但是在企業(yè)領域可能有很多好的應用是我們還沒有注意到的,所以我們今天做了重點的展示!盚ugo Swart說。
XR2兼具5G、AI能力

2018年,高通推出了第一款VR/AR專用芯片平臺XR1,時隔一年發(fā)布的驍龍XR2相比XR1進步不小,F(xiàn)場公布的數(shù)據(jù)顯示,對比XR1,XR2帶來了2倍的CPU和GPU性能提升、4倍視頻帶寬提升、6倍分辨率提升和11倍AI性能提升。
值得注意的是,驍龍XR2平臺支持七路并行攝像頭,實現(xiàn)對用戶的頭部、眼部、手部、表情、身體、環(huán)境、控制器的追蹤。此外,該平臺還是首個通過支持低時延攝像頭透視的XR平臺,讓用戶可以在佩戴VR設備時,在虛擬與現(xiàn)實融合的世界進行觀察、交互和創(chuàng)作。為了滿足沉浸式XR體驗的需求,在基礎的AI和可選的5G連接支持之上,XR2對視覺、交互和音頻技術方面進行了定制優(yōu)化。
在視覺方面,XR2的GPU實現(xiàn)了1.5倍像素填充率和3倍紋理速率,具備眼球追蹤的視覺聚焦渲染和支持更流暢刷新率的增強可變速率著色等XR專屬特性,可以在渲染重負載工作的同時保持低功耗。驍龍XR2的顯示單元可支持90fps的3Kx3K單眼分辨率,也是首個在流傳輸和本地播放中支持60fps的8K 360度視頻。針對AR顯示特別開發(fā)的定制芯片可幫助減少整體系統(tǒng)時延,以實現(xiàn)沉浸式的AR體驗。
在交互方面,XR2基于七路攝像頭對用戶的頭部、嘴唇和眼球進行追蹤,并且支持26點手部骨骼追蹤,提供高效的場景理解和3D重建。在音頻方面,XR2提供語音交互以深化沉浸感。該平臺包含一個定制的始終開啟的、低功耗的DSP,支持諸如語音激活和情境偵測等硬件加速特性,幫助用戶進入數(shù)字世界的同時,也能聽到真實世界的聲音。
基于AI和5G能力,XR2能夠通過支持終端和邊緣云之間的分離式處理營造更加逼真的高品質體驗,從而擺脫線纜或空間對XR設備的束縛。
雖然高通在2018年推出了XR1平臺,但除了大朋、3Glasses,大多數(shù)VR設備廠商并沒有搭載XR1,而是基于驍龍835、845打造芯片。XR2是否會重復XR1的局面,無法與自家的手機芯片抗衡呢?
對此,Hugo Swart在接受《中國電子報》記者采訪時表示 ,高通將XR分為兩個細分市場,一個是高端市場,也就是XR1的主攻市場;一個是頂級市場,也就是選擇驍龍835、845打造VR設備的市場。中國廠商愛奇藝、Nreal、Pico、影創(chuàng)等廠商,都是基于835、845開發(fā)VR設備的高階玩家。他預期,原先使用驍龍835、845的玩家都會遷移到XR2平臺。但是,高通也會繼續(xù)提供XR1芯片,因為中國仍有廠商在基于XR1開發(fā)設計他們的產品。
“高通做XR的出發(fā)點首先是把XR市場做起來。XR平臺給整個生態(tài)系統(tǒng)都帶來豐富的機會,希望除了硬件廠商,致力于空間計算等領域的互聯(lián)網公司也能參與進來,一起搭建生態(tài)系統(tǒng),一起推進XR平臺建設,抓住XR平臺的機會!盚ugo Swart說。