【編譯:VR陀螺】
近日,F(xiàn)acebook分享了公司在腕式設(shè)備方向的研究,據(jù)介紹,該腕式設(shè)備將用于高保真度的手指追蹤與觸覺反饋功能。
圖源:uploadvr
今年2月,媒體Information曾報(bào)道Facebook會在2022年發(fā)布SmartWatch,并于次年發(fā)布第二代產(chǎn)品。Facebook從事AR/VR交互與R&D輸入的負(fù)責(zé)人Sean Keller對公司的手腕設(shè)備做出如下描述:
“腕帶與手表現(xiàn)已被廣泛使用。手腕上的設(shè)備可作為計(jì)算、電池以及無線電的平臺,充當(dāng)具備顯示屏、觸摸界面,以及豐富觸覺反饋的完整輸入與輸出的集線器,并且廣泛支持各類傳感器。”
手部神經(jīng)信號追蹤
Oculus Quest頭顯可通過頭顯的攝像頭支持手部追蹤功能。該功能需要在光線充足的條件下使用,而且會產(chǎn)生一定程度的延遲。當(dāng)用戶雙手交疊時,頭顯無法實(shí)現(xiàn)追蹤。
更高質(zhì)的攝像頭、深度傳感器以及運(yùn)行速度更快的芯片有助于提高頭顯的手部追蹤功能。即便如此,在一些場景下,頭顯仍然無法追蹤一個或多個手指。
因此,F(xiàn)acebook還在進(jìn)行另外一種追蹤方式的研究,即通過讀取手腕信號進(jìn)行追蹤,采用該方案甚至可以實(shí)現(xiàn)在手部發(fā)生動作前感測其動作。Facebook于2019年初為類似設(shè)備提出專利申請,從事類似研究工作的紐約創(chuàng)企CTRL-Labs于2019年底被Facebook收購。
Facebook負(fù)責(zé)指導(dǎo)神經(jīng)運(yùn)動接口研究的Thomas Reardon表示,大腦很大程度上是對手部進(jìn)行控制,而不是對身體其他部分。他聲稱最近所取得的研究突破能夠解碼個體神經(jīng)元的活動,以“盡可能無限的對機(jī)器進(jìn)行控制”。這意味著手部交互可以達(dá)到令人難以置信的毫米級精度。
圖源:uploadvr
據(jù)了解,由于設(shè)備追蹤的是神經(jīng)信號而不是真實(shí)的手指,因此用戶可簡單地通過“想”移動手指讓虛擬手指移動。在Reardon展示的一小段視頻中,一位天生缺少一根手指的體驗(yàn)者進(jìn)行虛擬手部的控制,可以看到,追蹤其手部動作的虛擬手指是完整的。
值得注意的是,該追蹤方案對個人數(shù)據(jù)的收集可能會被視為很嚴(yán)重的個人隱私問題:
“類似這樣的神經(jīng)數(shù)據(jù)屬于私人信息,因此我們將此視為研究的一部分。如何處理這些個人信息,做到以人為本的提前下讓用戶參與體驗(yàn)是需要考慮的問題。我想說,作為科學(xué)家,我們會對公眾嚴(yán)格遵守透明性原理,向人們解釋我們?yōu)槭裁匆褂眠@些數(shù)據(jù),這些數(shù)據(jù)是如何被使用的,以及在哪些用戶體驗(yàn)中啟用了這些信息。”
基于腕部的觸覺反饋
在談到Facebook長期目標(biāo)時,AR/VR交互與R&D輸入負(fù)責(zé)人Sean Keller描述未來會像抽出“一雙柔軟、輕巧的觸覺手套。”
第一次聽說Facebook從事相關(guān)研究,還是在2019年世界觸覺會議時Facebook對“Tasbi”展示時。Facebook負(fù)責(zé)科學(xué)研究的經(jīng)理Nicholas Colonnese對從腕部設(shè)備輸送觸覺反饋的潛力進(jìn)行了討論。
圖源:uploadvr
我們直覺上會認(rèn)為手腕上的感覺并不太適用于基于手指的虛擬交互,但Colonnese表示感官替代可以做到這一點(diǎn),大腦會將視覺與觸覺刺激理解為同一回事。
圖源:uploadvr
“我們利用具備Tasbi振動與擠壓的觸覺功能在VR與AR中進(jìn)行了大量虛擬交互實(shí)驗(yàn),比如對按鈕進(jìn)行推、拉、轉(zhuǎn)等動作,以及在空間中移動虛擬物體。還嘗試了很多非典型案例,比如爬山、拉弓等。我們進(jìn)行這些測試,是想知道Tasbi的振動與擠壓反饋能否讓人感覺正在與這些物體進(jìn)行自然的交互。令人驚訝的是,得益于集合了身體多重信息的感官替代,我們得到了肯定的答案。”
Colonnese在與AR眼鏡配對時,描述了更多常見案例以驗(yàn)證Tasbi高保真觸覺反饋,例如步行導(dǎo)航時的振動反饋等。
來源:uploadvr
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息