【VR陀螺 編譯】9月25日舉行的OC6大會(huì)上,Facebook宣布Oculus Quest將支持基于現(xiàn)有的相機(jī)實(shí)現(xiàn)手勢(shì)識(shí)別功能,這一功能將于明年年初開放。
這將使開發(fā)人員可以創(chuàng)建與手進(jìn)行交互的應(yīng)用程序,而無(wú)需使用物理控制器?,F(xiàn)有的應(yīng)用程序也可以使用此功能進(jìn)行更新,由于缺少輸入或觸覺(jué)反饋,因此僅適用于某些應(yīng)用程序,例如社交VR等。
Facebook對(duì)VR的手勢(shì)識(shí)別感興趣的第一個(gè)跡象是在2014年底揭曉的。該公司收購(gòu)了由4名資深手勢(shì)識(shí)別技術(shù)專家組成的初創(chuàng)公司Nimble VR。但是收購(gòu)之后,Oculus清楚地知道該技術(shù)“甚至可能不會(huì)在CV2或CV3中使用”。
這可能是因?yàn)?/span>Nimble的技術(shù)不僅是軟件,而是專用的深度傳感器。深度傳感器可提供出色的手勢(shì)識(shí)別功能,例如新型HoloLens 2 AR頭顯所具有的功能。但是高端產(chǎn)品價(jià)格昂貴,而低端產(chǎn)品笨重且相對(duì)較重,這增加了頭顯的重量。
基于普通的攝像頭提供高質(zhì)量的手勢(shì)識(shí)別是完全不同的挑戰(zhàn)。但是,如果可以做到的話,它就可以將手勢(shì)識(shí)別添加到已經(jīng)使用攝像頭進(jìn)行其他跟蹤的頭顯中,而無(wú)需花費(fèi)額外的硬件成本。
2016年,在Oculus Connect 3大會(huì)上,首席科學(xué)家Michael Abrash對(duì)2021年的VR做出了一系列預(yù)測(cè)。他指出,使用手套上的標(biāo)記可以完美地進(jìn)行手指跟蹤(并展示了出來(lái)),但還不能直接進(jìn)行。但是,他預(yù)測(cè)到2021年將有可能。
如果這項(xiàng)功能在今年推出,那么Facebook將比Abash的預(yù)測(cè)提前一年。
在2018年的Facebook年度F8會(huì)議上,該公司終于展示了高質(zhì)量的無(wú)手套、無(wú)標(biāo)記手勢(shì)識(shí)別。
一位Oculus代表在舞臺(tái)上解釋說(shuō),這一“突破”是由于Facebook在機(jī)器學(xué)習(xí)( AI)研究上的大量投資而得以實(shí)現(xiàn)的。他們使用Abrash在2016年描述的那種手套系統(tǒng)來(lái)訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)以實(shí)現(xiàn)識(shí)別手勢(shì)功能,這很有可能使該功能成為可能。
人們戴上VR頭顯時(shí),要做的第一件最自然的事就是伸出雙手。手勢(shì)識(shí)別是最自然的操作,它們也非常適合游戲,但是目前并能追蹤絕大多數(shù)的手勢(shì)動(dòng)作。
在社交VR中,可以用真實(shí)的手自由打手勢(shì)的能力增加了沉浸感,并增加了社交影響力。比如有用戶在AltSpaceVR等平臺(tái)上使用Leap Motion來(lái)實(shí)現(xiàn)手勢(shì)識(shí)別進(jìn)行VR社交體驗(yàn)。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息