編譯/VR陀螺

盡管混合現(xiàn)實頭戴設(shè)備的制造商每年都在致力于推出功能更先進(jìn)的設(shè)備，以使用戶感受到真實世界與數(shù)字世界的融合，但是輸入方式（在VR或AR環(huán)境中進(jìn)行交互的能力）仍然具有挑戰(zhàn)性，因為大多數(shù)設(shè)備在交互時仍然需要控制器。本周，美國亞利桑那州立大學(xué)（ASU）的研究人員展示了一種名為FMKit的潛在替代產(chǎn)品，它使頭顯能夠精確跟蹤單個手指的運(yùn)動，并識別空中手寫。

ASU的工作超出了Leap Motion配件和Oculus Quest VR頭顯中的手部追蹤功能，可以將單個手指的路徑記錄在3D空間中，并與四個手寫樣本數(shù)據(jù)集進(jìn)行比較。指尖書寫可用于識別單個用戶，通過密碼安全地對用戶進(jìn)行身份驗證以及創(chuàng)建文本輸入，以替代使用手持控制器鍵入，說出或選擇單詞的方式。

該系統(tǒng)的價值不僅僅在于將空中書寫的英語或漢語單詞轉(zhuǎn)換為文本（研究人員正在關(guān)注的功能），還具有潛在的商業(yè)應(yīng)用前景。包括可以在空中繪制獨特的簽名，以解鎖受保護(hù)的XR頭顯或單獨受保護(hù)的應(yīng)用，從而使公司能夠高度個性化保護(hù)數(shù)字內(nèi)容。或者，公司可以讓團(tuán)隊共享一個通用的密碼系統(tǒng)，該系統(tǒng)不僅可以識別數(shù)字或字母，還可以識別五角星或其他獨特標(biāo)記等符號。

FMKit當(dāng)前支持兩種類型的輸入設(shè)備-每秒運(yùn)動110次的Leap Motion控制器和每秒運(yùn)動50次的自定義慣性測量數(shù)據(jù)手套-使用Python模塊來收集，預(yù)處理和可視化掃描信號。作為用戶識別系統(tǒng)，F(xiàn)MKit搭配Leap Motion精度可達(dá)到93％以上，搭配手套的精度可達(dá)到96％以上。但是對于手寫識別來說，使用Leap Motion的效果更好，而且該系統(tǒng)最多只能在87.4％的時間內(nèi)準(zhǔn)確識別單詞。這還不足以取代語音輸入來進(jìn)行聽寫，但這對于只能與手指和頭戴式傳感器一起使用的系統(tǒng)來說是一個好的開始。

ASU的Duo Lu，Linzhen Luo，Dijiang Huang和Yeye Yang已在GitHub上發(fā)布了FMKit的源代碼，這是一個開放源代碼項目，其中包括庫和數(shù)據(jù)集，希望其他研究人員能夠擴(kuò)展他們的工作。作者將在本周作為CVPR 2020計算機(jī)視覺增強(qiáng)和虛擬現(xiàn)實研討會的一部分介紹他們的研究。

來源：venturebeat