隨著技術(shù)的發(fā)展，VR、AR、MR的界限也越來越模糊。就在本月17號，HTC發(fā)布了一款Vive SRWorks SDK，讓開發(fā)者可以利用Vive Pro的前置攝像頭實現(xiàn)AR功能。而這款SDK一經(jīng)推出就引起了人們的廣泛注意，因為它的開放極大地拓寬了開發(fā)者的想象力，并為內(nèi)容開發(fā)提供了無限可能性。

借著香港環(huán)球資源電子展的機(jī)會，陀螺君對HTC北亞區(qū)總經(jīng)理鮑永哲進(jìn)行了專訪。而對于HTC此次推出的SDK，鮑永哲也表示：“5G時代已經(jīng)來臨，VR與AR的界限也很難再劃分得很清楚?！?br />

SRWorks SDK是什么？

據(jù)HTC Vive的官方解釋，SR指的是“See through Reality”。這款SRWorks SDK是通過Vive Pro的兩個前置攝像頭，為開發(fā)者提供一個可以創(chuàng)建AR體驗的工具。開發(fā)人員現(xiàn)在可以使用立體聲前置攝像頭創(chuàng)造新的體驗，將透視立體相機(jī)視圖與虛擬世界混合在一起，并利用立體聲RGB傳感器執(zhí)行3D感知和深度感應(yīng)。
開發(fā)者可以完全控制pro的前置相機(jī)以開發(fā)自己的混合現(xiàn)實體驗。該SDK包括三個模塊：深度模塊、透視模塊和三維重建模塊。這是一套基礎(chǔ)工具，通過前置攝像頭，允許開發(fā)人員使用該數(shù)據(jù)創(chuàng)建有趣體驗，而這些體驗可以是純粹的AR或VR體驗，也可以是兩者的組合。

HTC還表示，SRWorks SDK包含對Unity和Unreal插件的本地開發(fā)支持，并且可以實現(xiàn)以下功能：

• 深度            
• 空間映射（靜態(tài)和動態(tài)網(wǎng)格）
• 將虛擬對象放置在前景或背景中
• 與虛擬對象進(jìn)行實時以及簡單的手勢交互

在視頻中，我們可以看到用戶能夠抓起虛擬道具丟到真實世界的場景中，且道具的物理反饋相當(dāng)不錯。除此之外，用戶還可以拉出一個連接虛擬世界的傳送門，可進(jìn)行場景的無縫切換。除此之外，還能看到Vive Pro可以通過攝像頭對場景進(jìn)行識別，這展示了空間映射模塊如何創(chuàng)建房間內(nèi)幾何圖形的模型以供應(yīng)用程序使用。

除了SDK外，團(tuán)隊還更新了OpenVR相機(jī)API。目前Vive SRWorks SDK可通過HTC的開發(fā)人員門戶網(wǎng)站下載測試版。

采用新工具，Vive Pro的前置立體相機(jī)可以有效模擬AR眼鏡將在未來實現(xiàn)的理想體驗，即具有精確跟蹤且身臨其境的寬視場和環(huán)境映射。這將可能成為開發(fā)人員構(gòu)建未來XR硬件所需的優(yōu)秀開發(fā)工具包。

對于那些希望能夠開發(fā)將現(xiàn)實與虛擬結(jié)合在一起的內(nèi)容的開發(fā)者們來說，Vive Pro提供了新的選擇。相比起注冊Magic Leap SDK，并嘗試從該公司獲取難以獲得的硬件，同時還要嚴(yán)守保密協(xié)議來說，選擇Vive Pro來開發(fā)MR內(nèi)容要容易得多。這可以幫助開發(fā)者們在一個更加開放的環(huán)境中快速實現(xiàn)他們的想法。

Project Ghost Studios是受邀利用這款SRWorks SDK進(jìn)行內(nèi)容開發(fā)的早期合作伙伴，他們通過這款SDK開發(fā)出了一款新游戲。

在這款演示視頻中，我們可以看到用戶頭戴Vive Pro，透過攝像頭看到真實世界的場景，并可以在真實場景用手柄擊打虛擬小怪獸。同時，虛擬場景和現(xiàn)實場景還可以快速切換。

Project Ghost Studios的董事長Gaspar Ferreiro解釋道：“我們在今年年初有幸受到了HTC的邀請，成為小部分特邀開發(fā)者之一來研發(fā)涉及Vive Pro雙攝像頭的新SDK。我們最終得以揭曉這項研究成果。我們希望這個視頻能夠向你展示Vive Pro可以實現(xiàn)的部分新功能，以及這為故事敘述與沉浸式內(nèi)容提供的全新可能性。”

兩個前置攝像頭的真正作用

Vive Pro是HTC Vive推出的專門針對高端市場的VR頭顯，自公布以來就備受矚目。但其前置攝像頭在之前并未過多引起人們的注意。

“我們最初的雙鏡頭設(shè)計是為了更好的安全性，用戶在使用時可以設(shè)置把攝像頭打開，其實對于第一代vive，有一些用戶反饋表示覺得攝像頭不夠真實或開的時間點(diǎn)不對。所以我們在設(shè)計產(chǎn)品的時候希望能夠?qū)π庐a(chǎn)品的安全性做得更好，”鮑永哲說道?！暗街泻笃跁r，發(fā)現(xiàn)雙鏡頭可以做see-through，還能提供深度信息，所以工程師內(nèi)部產(chǎn)生一些比較開放的想法，覺得可以利用雙鏡頭做更多事情。”

有了深度信息之后，設(shè)備就可以實現(xiàn)一些簡單的slam、see-through、overlay的功能。所以HTC Vive選擇對開發(fā)者開放新SDK，從而更好地利用雙鏡頭。

鮑永哲透露，Vive團(tuán)隊有試著把自己的游戲和實際環(huán)境做結(jié)合，但由于內(nèi)部的studio只有兩三個團(tuán)隊，在創(chuàng)意上無法和瘋狂的游戲開發(fā)者們相比，而團(tuán)隊認(rèn)為這項功能應(yīng)該可以開發(fā)出更多的用途，所以希望開放SDK讓大家使用，并在未來做更多不同的嘗試。

“看你們怎么用，我們也可以互相借鑒。以后未來的某一代鏡頭可能做得很好，就可以做成see-through的VR，”鮑永哲笑言。

他還補(bǔ)充道：“我在自己公司內(nèi)部負(fù)責(zé)策略和產(chǎn)品。AR對消費(fèi)端市場來說應(yīng)用的方向是什么還沒有看的很清楚。但通過這一樣一步一步積累很多開發(fā)者的開發(fā)和創(chuàng)意，也可以幫助我去找到一些方向?！?br />
對于Vive Pro這項新功能，目前HTC Vive也還處于嘗試的階段?！拔覀兿Ｍ秒p鏡頭做更多不同的事情，不管是一些物體辨識還是更多功能，我們都愿意跟所有的partner合作?！?br />
眾所周知，VR頭顯的Inside-out定位追蹤正是通過攝像頭來實現(xiàn)的，但目前HTC Vive并不考慮改變設(shè)備的追蹤方式。鮑永哲表示，“有別的公司用自己的算法做我們也歡迎，但我們自己不做。至少自己沒有往這個方向考慮?！?br />
而對于這項新功能是否會對電腦運(yùn)行產(chǎn)生壓力的問題，鮑永哲稱由于Vive Pro主要還是靠燈塔定位，因此深度信息的處理任務(wù)并不重。而背景貼合是由相機(jī)直接收錄，且精度并不算高，因此對電腦CPU和GPU的壓力并不會很大。

雖然這款SDK極大開拓了Vive Pro的可能性，但對于我們所期待的“VR當(dāng)成AR用”的場景，Vive Pro暫時還無法實現(xiàn)。鮑永哲解釋道：“AR的應(yīng)用場景主要還是在室外，而不是固定的房間。但我們的產(chǎn)品還是要依靠電腦和lighthouse，變成AR設(shè)備的可能性不高，因為用途不對?！?br />
但同時他也表示，隨著技術(shù)的發(fā)展，未來有產(chǎn)品能夠走出室外，那么實現(xiàn)這個場景也不是不可能。

關(guān)注微信公眾號：VR陀螺（vrtuoluo）,定時推送，VR/AR行業(yè)干貨分享、爆料揭秘、互動精彩多。