文/VR陀螺 靈火
未來,VR頭顯和AR眼鏡將融為一體,并以輕巧、便攜和高效的形態(tài)被人們應(yīng)用在生活中的各處。2021年,VR產(chǎn)業(yè)發(fā)展明顯升溫,但這似乎距離前面描述的目標(biāo)還有很長的路要走。
就在上周,陀螺君從B站某UP主那學(xué)到了一個(gè)實(shí)現(xiàn)類似效果的半吊子玩法。其實(shí)就是基于Oculus Quest頭顯的邊界系統(tǒng)Guardian功能,在開啟透視的同時(shí)顯示VR界面并調(diào)整到合適的透明度玩VR游戲。
Quest開Guardian功能實(shí)現(xiàn)偽MR視效(圖源:B站)
這種黑白透視的新奇體驗(yàn),令陀螺君不禁聯(lián)想到:如果真有一款結(jié)合了AR眼鏡的增強(qiáng)現(xiàn)實(shí)顯示效果和VR頭顯的6DoF強(qiáng)交互玩法的產(chǎn)品,那它的體驗(yàn)究竟如何呢?
實(shí)際上,還真有一款叫“鴻鵠”的MR眼鏡與這一想法不謀而合。恰好,陀螺君也在這周收到了這款產(chǎn)品制造商影創(chuàng)科技寄來的快遞。就這樣,陀螺君抱著上面的疑惑開啟了這次的體驗(yàn)之旅。
售價(jià)2W塊
一款硬實(shí)力在線的MR眼鏡
圖源:VR陀螺
鴻鵠,由影創(chuàng)科技和英國PhotonLens聯(lián)合設(shè)計(jì),是首批搭載高通驍龍XR2平臺(tái)的混合現(xiàn)實(shí)設(shè)備之一,其主體分為主機(jī)、可拆卸6DoF體感手柄和MR眼鏡三個(gè)部分,眼鏡和主機(jī)之間則通過Type-C數(shù)據(jù)線連接。
從外觀來看,“鴻鵠”給人的第一印象更像是一個(gè)縮小版的Switch掌機(jī)。但所謂麻雀雖小五臟俱全,“鴻鵠” 的一副藍(lán)牙手柄采用磁吸式鏈接,可以實(shí)現(xiàn)供電、游玩兩不誤。手柄內(nèi)部還內(nèi)置了兩個(gè)6DoF“天線”,可供輕度交互時(shí)使用。
可拆卸+藍(lán)牙手柄+便攜式6DoF演示(圖源:影創(chuàng))
XR2平臺(tái)是高通針對(duì)XR設(shè)備,新推出的7nm工藝制程擴(kuò)展現(xiàn)實(shí)平臺(tái)。其原生支持5G網(wǎng)絡(luò)傳輸,CPU采用8核處理器、最高主頻可達(dá)2.84GHz,GPU采用Adreno 650 圖形處理器搭建。據(jù)悉,XR2的CPU和GPU 性能比上一代提升了2 倍、視頻帶寬提升4 倍、分辨率提升6 倍、AI 性能提升了11 倍。
交互方面,XR2定制化的計(jì)算機(jī)視覺處理器確保交互過程中的精準(zhǔn)高效,且可支持最多7路并行攝像頭下高精度實(shí)時(shí)追蹤用戶頭部、嘴唇和眼球,支持26點(diǎn)手部骨骼追蹤。計(jì)算機(jī)視覺則可高效進(jìn)行場景理解和3D重建。
這些所有底層功能,為“鴻鵠”的后期流暢體驗(yàn)帶來保障。而也的確如上所述,“鴻鵠”這款MR眼鏡獨(dú)特的地方,在于將目前流行的VR一體機(jī)交互方案無縫移植到了增強(qiáng)現(xiàn)實(shí)終端上。
圖源:VR陀螺
其CV方案頭手雙6DoF追蹤功能,基于影創(chuàng)自研的SLAM空間定位算法。
得益于XR2芯片和影創(chuàng)自研算法加持,“鴻鵠”MR眼鏡實(shí)現(xiàn)了虛擬物體與真實(shí)環(huán)境相對(duì)位置的持久化的功能。無論何種意外情況發(fā)生,虛擬物體在真實(shí)世界中的位置都是固定不變的。同時(shí),手柄上還集成了隱藏式追蹤燈環(huán),可有效彌補(bǔ)強(qiáng)光環(huán)境下CV方案的短板,實(shí)現(xiàn)穩(wěn)定追蹤。
SLAM定位遮擋測試(圖源:影創(chuàng))
就實(shí)際體驗(yàn)感受來說,“鴻鵠”MR眼鏡的追蹤方案與Quest相差無異。據(jù)影創(chuàng)科技透露,攝像機(jī)的拍攝速度是60Hz,每幀間隔16.6ms,視頻里每一幀的延遲都低于16.6ms。這種情況下依舊保持較高效的虛實(shí)疊加呈現(xiàn),表明整個(gè)系統(tǒng)的延遲都在1幀以內(nèi)。
圖源:影創(chuàng)
除了主機(jī)和MR眼鏡部分,“鴻鵠”的配件也相當(dāng)豐富。通過連接在主機(jī)背面的圓型磁吸支架,用戶可以隨意加載5G模塊或者外接充電寶供電。“鴻鵠”還配備了一個(gè)可拆卸的肩鍵設(shè)計(jì)。用戶可以根據(jù)需要選擇是否使用,這在保障完整手柄體驗(yàn)的同時(shí),實(shí)現(xiàn)了便攜。
圖源:影創(chuàng)
此外,“鴻鵠”還配備了全自由度自然手勢追蹤系統(tǒng),這塊在后面的系統(tǒng)實(shí)測環(huán)節(jié)中會(huì)講到。
系統(tǒng)、操作趨于“科幻”
真實(shí)版賽博朋克來了
實(shí)際上,這并非是陀螺君第一次體驗(yàn)“鴻鵠”。
今年一月初體驗(yàn)時(shí),這款MR眼鏡給我的最大震撼,來源于它將6DoF交互和混合現(xiàn)實(shí)相融合的新奇想法。但系統(tǒng)層面,盡管當(dāng)時(shí)是內(nèi)置安卓10以及Blue Cat 2.0雙系統(tǒng),但體驗(yàn)感受上仍處在初級(jí)狀態(tài)。
正所謂一日不見如隔三秋,這次再體驗(yàn)“鴻鵠”,竟有種時(shí)空穿越的感覺。
鏡框兩側(cè)為兩顆CV攝像頭,鏡片外側(cè)為兩顆紅外感應(yīng)器,中心為一顆800萬像素?cái)z像頭(圖源:VR陀螺)
操作系統(tǒng)
MR眼鏡的系統(tǒng)操作體驗(yàn),通常由視覺通透性、色彩對(duì)比度和交互三方面決定。說到這,相信大部分人都會(huì)首先想起于2019年底發(fā)售的,赫赫有名的微軟HoloLens 2。
“鴻鵠”MR眼鏡中,可以看到一些借鑒的影子。首先,該設(shè)備也和HoloLens 2一樣支持全自由度自然手勢追蹤,這意味著用戶只需要正常的通過抓、握、拽等常見動(dòng)作就可以實(shí)現(xiàn)系統(tǒng)交互。
圖源:影創(chuàng)
操作界面的可視化,“鴻鵠”采用了更加靠近安卓電視桌面的排布方式。上手后不會(huì)像HoloLens 2那種手腕呼出界面一樣令人感到陌生。幾秒內(nèi),用戶就可以用手拖動(dòng)界面對(duì)應(yīng)的位置滑動(dòng)圖標(biāo)并選擇應(yīng)用。
值得一提的是,手勢模型到控制界面之間,有一條“磁力線”作為鏈接。這使得用戶不用像HoloLens 2中一樣非得走到面前去戳對(duì)應(yīng)的位置,而是可以與虛擬窗口保持一定距離實(shí)現(xiàn)流暢操作。
縮放操作演示(圖源:影創(chuàng))
以頁面窗口為例,用戶可以通過將“磁力線”吸附在邊框上進(jìn)行翻轉(zhuǎn)。配合比較直觀的過渡動(dòng)畫效果,可以給人一種自然、高流暢度操控感受。
繪畫應(yīng)用
回到6DoF交互上,基于手柄“鴻鵠”可以準(zhǔn)確追蹤用戶手臂更多自由度的活動(dòng)。為了更好地展現(xiàn)其在MR眼鏡上的表現(xiàn),“鴻鵠”內(nèi)置了一款類似MR版本《Tilt Brush》的繪畫應(yīng)用。
圖源:影創(chuàng)
在實(shí)際體驗(yàn)過程中,懸空的畫板和真實(shí)環(huán)境背景形成透視關(guān)系,更像是在現(xiàn)實(shí)生活中的一張透明亞克力板。同樣的,作畫過程中筆觸的力道、軌跡都模擬的非常真實(shí)。值得一提的是,因?yàn)?/span>“鴻鵠”使用的是BB光學(xué)方案,其對(duì)比度、透光性和色彩控制都要比波導(dǎo)類更好,此外相較VR頭顯又少了分辨率問題的困擾,在這樣的場景下的繪畫體驗(yàn)十分新奇,可謂是極具科幻感。
圖源:影創(chuàng)
繪畫過程中,手柄與筆觸做到無縫銜接。在這里,可以全面呈現(xiàn)出“鴻鵠”6DoF手柄在無延遲三維空間追蹤效果的出色表現(xiàn)。
在虛擬鴻鵠的創(chuàng)作過程中,手柄與SLAM算法相融合,實(shí)時(shí)感知現(xiàn)實(shí)空間的三維信息,XR2處理器做出機(jī)器視覺信息運(yùn)算,再將虛擬畫面與手柄軌跡一一對(duì)應(yīng),這樣的閉環(huán)計(jì)算幾乎感知不到延遲,更是靠肉眼無法察覺的。
影音娛樂
6DoF交互+SLAM呈現(xiàn),為一些成熟的游戲作品移植打好了堅(jiān)實(shí)的基礎(chǔ)。比如,在MR環(huán)境中體驗(yàn)《Beat Saber》,需要的是超低延遲和長時(shí)間高頻運(yùn)動(dòng)下穩(wěn)定的虛擬環(huán)境定位??梢哉f,此次體驗(yàn)里“鴻鵠”都做到了。
此外,“鴻鵠”的安卓10系統(tǒng)自然可以原生支持安卓游戲在其上流暢運(yùn)行。陀螺君在MR眼鏡上嘗試了王者榮耀和網(wǎng)頁瀏覽。面對(duì)全息大屏打游戲、追劇,并且還有種飄浮在半空中若隱若現(xiàn)的感覺,這種游戲體驗(yàn)像極了各類賽博朋克電影中的經(jīng)典場景。
圖源:影創(chuàng)
最重要的是,相較于僅僅作為外接顯示器的傳統(tǒng)手機(jī)+AR分體式眼鏡設(shè)備,“鴻鵠”自帶的手柄可以藍(lán)牙適配大部分游戲內(nèi)容,遙感+按鍵操作的舒適度遠(yuǎn)超盲搓手機(jī)。
“鴻鵠”背后
承載著影創(chuàng)怎樣的大志?
“鴻鵠”的背后,是CV方案6DoF交互、XR2芯片組、手勢識(shí)別等技術(shù)趨于成熟的寫照;VR產(chǎn)業(yè)從Cardboard到Quest,AR產(chǎn)業(yè)從15°FOV棱鏡到45°FOV BB光學(xué)......這些底層技術(shù)不再被高高掛起,各大廠商結(jié)合自有特色研發(fā)出新產(chǎn)品,并開啟探索走向商用化和普及化的征程。
Quest VR游戲生態(tài)正在海外市場掀起一場熱潮。 其成熟生態(tài)的背后,離不開技術(shù)硬實(shí)力的支撐。而影創(chuàng)作為國內(nèi)MR硬件廠商,憑借自研將6DoF等技術(shù)成功賦能到MR眼鏡上,這證明國內(nèi)內(nèi)容生態(tài)起勢前的技術(shù)儲(chǔ)備階段已經(jīng)頗見成效。
便攜性大幅提升(圖源:影創(chuàng))
至于國內(nèi)MR游戲未來是否會(huì)像VR游戲一樣火爆,現(xiàn)階段不好妄下結(jié)論。但是,“鴻鵠”給了國內(nèi)VR、AR游戲開發(fā)者更多可能性,無論是舊游戲移植還是新游戲創(chuàng)作,對(duì)于急待發(fā)展優(yōu)質(zhì)內(nèi)容和良性營收閉環(huán)的中國VR/AR游戲生態(tài)來說都是好事。
總結(jié)
上次體驗(yàn)時(shí),影創(chuàng)工作人員告訴陀螺君,他們正在以一天N次迭代的高強(qiáng)度工作方式來優(yōu)化“鴻鵠”操作系統(tǒng)、可視化界面和人機(jī)交互的體驗(yàn)成熟度。今天,“鴻鵠”算是交上了一份滿意的答卷。
“鴻鵠”MR眼鏡原價(jià)是20000元,預(yù)售定金是5000元。目前“鴻鵠”MR眼鏡已經(jīng)開啟預(yù)售通道,影創(chuàng)科技還推出了“趣味問答免尾款”(限量198臺(tái),目前已售罄)、“體驗(yàn)反饋贏免單”和“2021 Qualcomm XR 創(chuàng)新應(yīng)用挑戰(zhàn)賽贏獎(jiǎng)品”活動(dòng)。
如果參加“體驗(yàn)反饋贏免單”和“2021 Qualcomm XR 創(chuàng)新應(yīng)用挑戰(zhàn)賽贏獎(jiǎng)品”活動(dòng),將有機(jī)會(huì)獲得影創(chuàng)科技免費(fèi)贈(zèng)送的“鴻鵠”MR眼鏡。
無論是從技術(shù)、算法層面看,還是創(chuàng)新能力和想象力上看,國內(nèi)以影創(chuàng)為代表的一眾廠商正在MR這條道路上擴(kuò)寬探索半徑。隨著海外消費(fèi)級(jí)市場的崛起,成熟商業(yè)化技術(shù)模式的形成,國內(nèi)將依托獨(dú)有的產(chǎn)業(yè)鏈優(yōu)勢助推國內(nèi)廠商一路向前,以更好的體驗(yàn)、更加低廉的成本后發(fā)搶占國際市場。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請(qǐng)聯(lián)系微信:vrtuoluo233 申請(qǐng)授權(quán),并在轉(zhuǎn)載時(shí)保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實(shí)出處,如涉及版權(quán)問題,請(qǐng)聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息