日前,高通針對(duì)VR/AR推出了其第一款專用芯片——XR1,雖然其之前的幾款方案幾乎都支持VR/AR,但XR1的意義遠(yuǎn)不止如此。
借此契機(jī),陀螺君采訪到高通(Qualcomm)XR業(yè)務(wù)中國(guó)區(qū)負(fù)責(zé)人,了解到高通推出XR1的真正目的。
在智能手機(jī)芯片中穩(wěn)居老大位置的高通,在XR中依舊聚焦于移動(dòng)平臺(tái)。當(dāng)我們以為高通只是借這款芯片在XR上試水時(shí),其已經(jīng)做好了在XR上長(zhǎng)期作戰(zhàn)的準(zhǔn)備,并表示該芯片還將陸續(xù)迭代。
“我們堅(jiān)信移動(dòng)XR是下一代計(jì)算平臺(tái)”,郭鵬堅(jiān)定地說(shuō)道。
5月29日,在圣克拉拉舉辦的AWE上,高通正式發(fā)布其第一款專門(mén)針對(duì)VR/AR的芯片——XR1。高通甚至為其專門(mén)開(kāi)辟XR產(chǎn)品線,可見(jiàn)其對(duì)XR的重視程度。
其實(shí)從2、3年前開(kāi)始,XR1這款芯片就已經(jīng)開(kāi)始規(guī)劃,之所以選擇在2018年推出,郭鵬說(shuō)明了原因。
“目前的VR產(chǎn)業(yè)發(fā)展比較成熟,雖然沒(méi)有爆發(fā),但VR產(chǎn)業(yè)鏈包括硬件、軟件、零部件都逐步趨于成熟、定形。而對(duì)AR來(lái)說(shuō),雖然還沒(méi)有完全成熟,但已經(jīng)有不同形態(tài)的AR產(chǎn)品開(kāi)始被開(kāi)發(fā)者廣泛采用。所以在這個(gè)時(shí)間點(diǎn)推出一款專門(mén)的XR芯片,對(duì)VR注入新鮮血液,把AR產(chǎn)業(yè)往前推進(jìn)來(lái)說(shuō),都是非常合適的。”
在XR出現(xiàn)之前,我們熟知的只有VR、AR和MR,其都有相對(duì)應(yīng)的設(shè)備,且概念更容易理解。而高通主打的XR究竟是什么概念?
郭鵬對(duì)XR的定義解釋道,“XR”這個(gè)術(shù)語(yǔ),是被用來(lái)描述增強(qiáng)現(xiàn)實(shí)(AR)、虛擬現(xiàn)實(shí)(VR)、混合現(xiàn)實(shí)(MR)以及所有相關(guān)的用例。而高通更多是從這些“R”的底層去看,這些AR、VR或者M(jìn)R的底層軟硬件技術(shù)其實(shí)很多都是相通的,尤其是芯片這側(cè)一些基本的技術(shù)、SDK等。“所以我們用’XR’這個(gè)概念來(lái)包括虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)的整個(gè)業(yè)務(wù)內(nèi)容。這是我們最根本的出發(fā)點(diǎn),我們認(rèn)為在未來(lái)一定會(huì)有一個(gè)融合的趨勢(shì)。”
“我們堅(jiān)信移動(dòng)XR是下一代計(jì)算平臺(tái)。”郭鵬堅(jiān)定地說(shuō)道。
關(guān)于*R將成為下一代計(jì)算平臺(tái)的說(shuō)法,在VR這一波爆發(fā)之初幾乎不絕于耳,而隨著一輪洗牌之后,漸漸地越來(lái)越少人對(duì)外主張,甚至很多人對(duì)這個(gè)觀點(diǎn)開(kāi)始持懷疑的態(tài)度。不過(guò)高通卻一直在用行動(dòng)貫徹始終。
從PC互聯(lián)網(wǎng)到移動(dòng)互聯(lián)網(wǎng)的發(fā)展過(guò)程中,人們的使用習(xí)慣也發(fā)生了巨大的變化,智能手機(jī)成為生活中的必需品。從通訊芯片發(fā)家的高通也在移動(dòng)浪潮中,在智能手機(jī)領(lǐng)域占據(jù)了絕對(duì)優(yōu)勢(shì),根據(jù)Strategy Analytics 發(fā)布的2017年全球智能手機(jī)應(yīng)用處理器市場(chǎng)收益份額數(shù)據(jù)來(lái)看,高通市占比達(dá)到42%,遠(yuǎn)超蘋(píng)果和聯(lián)發(fā)科等其他平臺(tái)。雖然也嘗試向PC領(lǐng)域進(jìn)軍,但并不順利。
“我們一直把XR定義為下一代的移動(dòng)計(jì)算平臺(tái),它未來(lái)是可以替代部分、甚至是大部分手機(jī)功能的平臺(tái)。現(xiàn)在很多時(shí)候我們用手機(jī)操作,比如觀看視頻、閱讀或是瀏覽信息,都是需要雙手拿著手機(jī)的。而對(duì)VR/AR眼鏡來(lái)講,它將能夠解放你的雙手,讓你有更多的空間和更多的方式去進(jìn)行交互。”
所以在高通眼中,XR在未來(lái)的潛力是可以與現(xiàn)在的智能手機(jī)匹敵的。而既然認(rèn)定了這個(gè)方向,為了推動(dòng)XR的發(fā)展,高通似乎也是不遺余力地布局。
除了上述XR1芯片之外,高通在XR領(lǐng)域的布局遠(yuǎn)超我們想象。
1、芯片:低中高三端齊下
其實(shí)在XR1芯片推出之前,高通的821、835、包括最新的845都已經(jīng)在VR/AR設(shè)備中有應(yīng)用,特別是835和845方案,都專門(mén)針對(duì)VR/AR做了優(yōu)化。
相比其他幾款,XR1則是為XR定制。從郭鵬口中,我們了解到高通對(duì)這款芯片的定位,在其看來(lái),XR1是820、821方案最適合的過(guò)渡產(chǎn)品,性能較這兩款芯片有提升,但相比835、845這種主高級(jí)方案又略微遜色。
“目前針對(duì)VR和AR產(chǎn)品的演進(jìn),與手機(jī)相比是有一些差異的。比如刷新率的支持就十分明顯,因?yàn)槭謾C(jī)都是支持比較主流的60Hz,在VR、AR設(shè)備上則需要支持75Hz甚至90Hz。另外一方面是屏幕的分辨率,手機(jī)上一般是很難用到4K甚至2K,但是在VR設(shè)備上,要追求大的FOV(視場(chǎng))達(dá)到沉浸式體驗(yàn),2K、4K分辨率其實(shí)都是不過(guò)分的。除此之外還有一些專門(mén)針對(duì)XR的新技術(shù),比如說(shuō)3DoF或者6DoF的手勢(shì)方案、眼球追蹤、局部渲染的支持,這是以前在手機(jī)上都是沒(méi)有的,但對(duì)于XR而言是新技術(shù)。不管是對(duì)于驍龍820、821、835和845上針對(duì)支持XR的軟件,還是驍龍XR1這個(gè)專用芯片的軟件和硬件,我們針對(duì)VR和AR都有特別的優(yōu)化、來(lái)支持XR的特性功能。”
高通845平臺(tái)
據(jù)稱,XR1的亮點(diǎn)主要集中在4個(gè)方面:
1、AI Engine,能夠處理AI用例,運(yùn)行是計(jì)算機(jī)視覺(jué)算法,以實(shí)現(xiàn)應(yīng)用于AR場(chǎng)景的姿勢(shì)預(yù)測(cè)、物體識(shí)別等。
2、支持4K 60幀視頻播放,并且可以利用ISP軟硬件算法降噪,支持OpenGL、OpenCL和Vulkan等API。同時(shí),基于高級(jí)視覺(jué)處理技術(shù),如視覺(jué)慣性測(cè)距(VIO)等,讓用戶能在虛擬世界里自由移動(dòng),或在AR體驗(yàn)中與虛擬物體進(jìn)行互動(dòng)。
3、全景聲效果。XR1的頭相關(guān)變換函數(shù)(head-related transfer functions, HRTF)可根據(jù)用戶的頭耳傳遞參數(shù)“定制”合成雙耳聲,讓用戶感覺(jué)仿佛聲音是來(lái)自空間中某個(gè)特定的位置。
4、支持3DOF和6DOF交互,顯示時(shí)延低于20ms。
據(jù)稱目前Meta、Vive、Vuzix和Pico等廠商已基于首款專用的XR1平臺(tái)進(jìn)行開(kāi)發(fā),今年Q4季度將會(huì)有搭載了這款方案的產(chǎn)品面世。
另外,對(duì)于835和845平臺(tái),835已經(jīng)在Vive Focus、Pico Neo、愛(ài)奇藝奇遇二代等主流的頭顯中應(yīng)用。而845,高通將其定義為移動(dòng)端的體驗(yàn)方案。今年年初,高通針對(duì)這一平臺(tái)推出了VR頭顯參考設(shè)計(jì),在頭顯中集成了眼球追蹤、手勢(shì)識(shí)別、SLAM定位、6DoF追蹤等功能。高通曾表示,驍龍845移動(dòng)平臺(tái)“旨在幫助消費(fèi)者拍攝影院級(jí)視頻,以及模糊物理世界和虛擬世界之間的界限”。
高通VR一體機(jī)參考方案
從芯片方案上,高通的平臺(tái)覆蓋了低中高體驗(yàn)方案。在芯片的研發(fā)投入上,根據(jù)IC Insights發(fā)布的2017年半導(dǎo)體研發(fā)領(lǐng)域投入TOP10的公司來(lái)看,高通僅次于英特爾,去年在芯片研發(fā)上投入了34.5億美元。
(數(shù)據(jù)來(lái)源:IC Insights)
2、投資:XR已布局多年
在XR領(lǐng)域的投資方面,高通也投入了相當(dāng)高的額度。
2000年11月,高通成立Qualcomm風(fēng)險(xiǎn)投資,啟動(dòng)5億美元基金用于投資發(fā)展早期的高科技企業(yè),小米、中科創(chuàng)達(dá)等都獲得了高通的支持。
從2015年開(kāi)始,高通的主營(yíng)業(yè)務(wù)逐漸從智能手機(jī)延伸到前沿科技,包括無(wú)人機(jī)、機(jī)器人、AR/VR、AI、物聯(lián)網(wǎng)等領(lǐng)域,這也成為了高通創(chuàng)投主要關(guān)注的方向。
從陀螺君整理的高通在VR/AR上的投資布局來(lái)看,其投資的大部分企業(yè)都成功融到了A輪之后,甚至到C、D輪的階段,融資額多數(shù)達(dá)到數(shù)千萬(wàn)美元。而在對(duì)企業(yè)的傾向性上,其似乎更偏向于硬件和技術(shù)相關(guān)的企業(yè),特別是AR眼鏡廠商Magic Leap和眼球追蹤技術(shù)研發(fā)商七鑫易維、以及海外的VR相機(jī)研發(fā)商Marrport這三家更是獲得了高通多輪追投。而高通推的845方案的VR一體機(jī)中,也結(jié)合了七鑫易維的眼動(dòng)模組。
由于高通自身處于產(chǎn)業(yè)鏈上游,能夠最快速地了解到前沿科技,其對(duì)于技術(shù)的發(fā)展以及應(yīng)用前景能有更深的把握,其投資的這些技術(shù)、企業(yè)也恰巧驗(yàn)證了高通一直在強(qiáng)調(diào)的,堅(jiān)信XR是下一代計(jì)算平臺(tái)的這一觀點(diǎn)。
雖然堅(jiān)定了這條路,但郭鵬并不覺(jué)得XR能在短期內(nèi)像智能手機(jī)一樣融入大眾生活中。其認(rèn)為未來(lái)至少需要5-10年,XR可能才會(huì)成為人類平時(shí)生活不可缺少的設(shè)備。
而目前來(lái)看,郭鵬認(rèn)為制約移動(dòng)XR發(fā)展的幾個(gè)因素主要在于:
1、硬件優(yōu)化。從底層芯片來(lái)看,當(dāng)算法跑在硬件上,如何實(shí)現(xiàn)很好的性能與功耗,是制約產(chǎn)品使用體驗(yàn)的重要因素。
2、外圍零部件的發(fā)展。比如屏幕、光學(xué),這些對(duì)于產(chǎn)品的形態(tài)、體積、成本非常關(guān)鍵。
3、內(nèi)容。比如VR視頻、游戲內(nèi)容,AR方面更多、更豐富的人機(jī)交互應(yīng)用,都必須要依靠整個(gè)產(chǎn)業(yè)鏈和開(kāi)發(fā)者共同推進(jìn)。
“現(xiàn)在的XR可能相當(dāng)于二三十年前的手機(jī)行業(yè),它還在一個(gè)非常初級(jí)的階段。因?yàn)槲覀兛梢院苊黠@地看到,光是在XR里一個(gè)很小的領(lǐng)域,比如說(shuō)XR里的AR顯示或是光學(xué)領(lǐng)域,就會(huì)有非常多的公司存在,還處于一個(gè)技術(shù)“群雄亂起”的年代。經(jīng)過(guò)時(shí)間的推移,隨著產(chǎn)品化、量產(chǎn)性、技術(shù)成本、成熟度的發(fā)展,一定會(huì)逐漸出現(xiàn)一些最終站上舞臺(tái)的技術(shù)公司,來(lái)把技術(shù)不斷地往前推進(jìn),推到一個(gè)比較明確的發(fā)展道路上去。這就類似于二三十年前的手機(jī),功能機(jī)時(shí)代有很多不同的技術(shù),但后來(lái)我們會(huì)發(fā)現(xiàn),有一些技術(shù)到將來(lái)可能沒(méi)有太大的用處,逐漸就會(huì)被淘汰。但一定有主流技術(shù)會(huì)帶領(lǐng)這個(gè)市場(chǎng)往前走,走到今天這個(gè)時(shí)間節(jié)點(diǎn),XR未來(lái)也會(huì)是走上這樣一個(gè)路徑。”
而在XR的發(fā)展過(guò)程中,5G將是其重要的助推力。
5G擁有高帶寬、低時(shí)延、海量大連接的特性,其未來(lái)要求單個(gè)5G基站至少能夠支持20Gbps的下行速率以及10Gbps的上行速率,主要應(yīng)對(duì)4K/8K超高清視頻、VR/AR等大流量應(yīng)用。
各大運(yùn)營(yíng)商都在推進(jìn)5G的基礎(chǔ)設(shè)施建設(shè),循序漸進(jìn)地落地,而高通、英特爾、華為等各大手機(jī)廠商的5G芯片也相繼面世,5G商用預(yù)計(jì)將從2019年正式開(kāi)始。
但是,智能手機(jī)并不是5G最適合的應(yīng)用場(chǎng)景,因?yàn)楝F(xiàn)在4G網(wǎng)絡(luò)已經(jīng)完全能夠滿足手機(jī)上的看視頻、刷網(wǎng)頁(yè)、語(yǔ)音通話等各種需求。所以從今年WMC展會(huì)上的情況來(lái)看,各大運(yùn)營(yíng)商,包括參與推進(jìn)5G落地的廠商,都會(huì)在展臺(tái)展示VR/AR的相關(guān)應(yīng)用,包括VR直播、VR觀影、VR游戲、VR電競(jìng)等等。
在VR硬件方面,今年其實(shí)也看到非常多的硬件廠商將設(shè)備定位于觀影場(chǎng)景,包括愛(ài)奇藝的奇遇二代、Oculus GO、小米VR一體機(jī)以及億境的EM-VR01等,而市場(chǎng)上也有非常多用于觀影的專業(yè)設(shè)備,比如嗨鏡、柔宇Moon,這些設(shè)備均為一體機(jī),主打高3K甚至4K分辨率屏幕,能能夠播放4K或者8K視頻。
在6月份中國(guó)移動(dòng)發(fā)布的《5G終端產(chǎn)品指引》中,提到的未來(lái)三類5G行業(yè)終端拓展智能終端中,通用類產(chǎn)品(VR/AR、無(wú)人機(jī))赫然在列。并且計(jì)劃在2019年4月和7月分別采購(gòu)智能手機(jī)、VR/AR等設(shè)備。
“如果說(shuō)3G時(shí)代是高清通話,4G是高清視頻傳輸,那我們認(rèn)為對(duì)5G來(lái)說(shuō),VR、高清全景視頻,4K、8K視頻傳輸,都一定會(huì)是很重要的用例。同時(shí)對(duì)于游戲這方面,5G也會(huì)有一些新的爆發(fā)點(diǎn)和結(jié)合點(diǎn)。”
陀螺君認(rèn)為,5G或許難以讓VR/AR一時(shí)間內(nèi)得到大范圍爆發(fā),但5G將成為后續(xù)XR的發(fā)展基石,芯片、屏幕、交互、系統(tǒng)各方面共同進(jìn)步,解決了硬件最根本的問(wèn)題才有可能真正成為普適性的消費(fèi)電子產(chǎn)品。
而高通,則正是給XR打基石的重要一員。
關(guān)注微信公眾號(hào):VR陀螺(vrtuoluo),定時(shí)推送,VR/AR行業(yè)干貨分享、爆料揭秘、互動(dòng)精彩多。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息