文/VR陀螺 小鉆風(fēng)
今日,中國從事腦機(jī)接口(BCI)10余年的研發(fā)商博??敌纪瓿蛇^億元B輪融資,紅杉中國獨(dú)家領(lǐng)投。
腦機(jī)接口現(xiàn)已成為當(dāng)今最熱門的話題,造火箭的馬斯克、Facebook的小扎都是其狂熱粉絲。
腦機(jī)接口不只是深得巨頭看好,越來越多的初創(chuàng)公司也開始從事相關(guān)研究,來自法國的神經(jīng)技術(shù)初創(chuàng)公司NextMind便是其中之一。
圖源:NextMind
NextMind創(chuàng)始人Sid Kouider此前是認(rèn)知神經(jīng)科學(xué)教授,積累了大量有關(guān)無創(chuàng)解碼神經(jīng)信號(hào)的專業(yè)知識(shí),希望開發(fā)出能通過視覺皮層視野解碼視覺意識(shí),進(jìn)行腦機(jī)交互的產(chǎn)品,于是成立了NextMind。
NextMind曾在CES上展出腦機(jī)接口設(shè)備,引發(fā)大量關(guān)注。今天,陀螺君想要帶大家體驗(yàn)的便是NextMind這款腦機(jī)接口設(shè)備,借這款產(chǎn)品帶大家開啟腦機(jī)接口的大門。
售價(jià)399美元,不足巴掌大小的腦機(jī)接口設(shè)備NextMind有何特別之處?
腦機(jī)接口設(shè)備NextMind裝置非常簡單,小巧簡潔,易安裝,易操作,僅包含三個(gè)部分:傳感器、頭帶以及USB電纜,其核心是傳感器,也就是進(jìn)行腦機(jī)連接的接口。
圖源:NextMind
NextMind傳感器外形設(shè)計(jì)與蜘蛛類似,通體黑色,由一個(gè)包含傳感器電路的圓形主體與包含九個(gè)EEG(腦電波)傳感器的弧形支架組成。
圖源:NextMind
從傳感器的凹面看,可以清楚的看到九個(gè)類似小腳的EEG傳感器,交流數(shù)據(jù)由這些傳感器直接向主體傳達(dá)。
圖源:NextMind
圓形主體的側(cè)面,一側(cè)設(shè)有USB-C端口用于充電,另一側(cè)設(shè)有按鈕和指示燈,該按鈕用于打開/關(guān)閉NextMind,以及進(jìn)行藍(lán)牙配對(duì)。
圖源:NextMind
NextMind續(xù)航時(shí)間較長,充滿電需2個(gè)小時(shí),可持續(xù)使用時(shí)間約為8小時(shí)。據(jù)介紹,傳感器對(duì)電池的管理方式較為智能,閑置幾秒后便會(huì)處于待機(jī)狀態(tài),因此在佩戴前最好提前檢查是否處于開機(jī)狀態(tài)。
NextMind規(guī)格如下:
圖源:VR陀螺
NextMind傳感器可與PC、Mac兼容。與NextMind兼容并不需要很高配置,但如需與VR頭顯一起使用,則需使用支持VR的PC。
圖源:VR陀螺
需要注意的是,NextMind僅與PC、Mac兼容,目前尚未支持Android系統(tǒng)。這意味NextMind與Oculus共同使用時(shí),需使用Link進(jìn)行PC連接,不可直接與Quest獨(dú)立使用。
有猜測認(rèn)為,未來可能會(huì)通過藍(lán)牙連接的方式增加對(duì)獨(dú)立VR頭顯的支持,運(yùn)行時(shí)可能會(huì)將其移植至Android系統(tǒng),并對(duì)移動(dòng)系統(tǒng)進(jìn)行優(yōu)化。
NextMind現(xiàn)可在全球多個(gè)地區(qū)購買,售價(jià)399美元起。
易安裝,可與VR頭顯配合使用的NextMind如何工作?
NextMind的安裝很簡單,無需任何技巧,核心只需做到讓傳感器緊貼后腦勺,別讓頭發(fā)擋住,以及綁緊點(diǎn),別讓它滑動(dòng)即可。
使用頭帶時(shí),只需將傳感器與頭帶連接,戴上頭帶后確保傳感器保持在頸背,佩戴好頭帶后,輕輕地進(jìn)行上下調(diào)整,使EEG傳感器觸角與頭骨部分的皮膚相連接(而不是頭發(fā)),讓從大腦讀取的數(shù)據(jù)更為可靠。
如果與頭顯一起使用,不使用頭帶,而是將傳感器直接連接到設(shè)備后部,戴上頭顯后,確保其保持在頸背位置。
圖源:NextMind
傳感器之所以佩戴在后腦勺部位,是為了靠近視覺皮層以讀取其發(fā)出的腦電波。當(dāng)我們注意力集中在某個(gè)物體時(shí),眼睛會(huì)將所看到的信息發(fā)送給大腦,大腦的各個(gè)區(qū)域會(huì)針對(duì)這些信息進(jìn)行處理。
“視覺皮層”就是其中的一個(gè)重要區(qū)域。“視覺皮層”在面對(duì)不同信息時(shí)會(huì)產(chǎn)生可識(shí)別的反應(yīng),也就是不同頻率的腦電波。NextMind傳感器通過讀取這些腦電波信號(hào)來“理解”我們的想法。
圖源:網(wǎng)絡(luò)
雖然顏值高,佩戴方便,但NextMind佩戴舒適度有待提高,NextMind官方提供的頭帶配有魔術(shù)貼,用戶可自行調(diào)節(jié)松緊。想要獲得更好的大腦讀數(shù),傳感器需與頭部保持緊密貼合,且避免移動(dòng),否則校準(zhǔn)無效。
因此頭帶繃緊比松弛狀態(tài)更好。然而傳感器的觸角部分塑料邊緣非常鋒利,如果頭帶束緊,會(huì)引起疼痛。
圖源:NextMind
在與頭顯配合使用時(shí),同樣會(huì)出現(xiàn)類似情況。在頭顯背部位置安裝傳感器后,頭顯與頭部貼合度會(huì)被改變。為使傳感器與頸背相貼合,頭顯佩戴時(shí),頭顯后部要比通常位置低,因此,頭顯眼鏡部分會(huì)向上翹起,導(dǎo)致和鼻梁間的空隙變大。
此外,傳感器在與頭顯進(jìn)行連接時(shí),不一定能保持穩(wěn)定,因此需要注意不能使傳感器滑落。
軟件方面,用戶可在NextMind網(wǎng)站下載可配置所有內(nèi)容的安裝程序,該安裝程序會(huì)安裝帶有內(nèi)置演示的集線器,以及一個(gè)指導(dǎo)安裝的實(shí)用程序。軟件安裝僅需通過藍(lán)牙將NextMind傳感器連接到計(jì)算機(jī),這是設(shè)備唯一的通信渠道。
NextMind通過藍(lán)牙與頭顯進(jìn)行連接(圖源:NextMind)
安裝好需進(jìn)行校準(zhǔn),首先需要啟動(dòng)應(yīng)用程序驗(yàn)證該傳感器正在從大腦讀取可靠數(shù)據(jù),如果沒有,可能是傳感器未與皮膚直接接觸,而是接觸到頭發(fā),需要進(jìn)行調(diào)整。此時(shí),可看到一個(gè)脈動(dòng)圓圈持續(xù)40秒的時(shí)間,以便運(yùn)行時(shí)可根據(jù)用戶特定大腦反應(yīng)校準(zhǔn)其檢測算法。
NextMind校準(zhǔn)(圖源:NextMind)
校準(zhǔn)完成后,用戶會(huì)獲得1至5的分?jǐn)?shù),分?jǐn)?shù)越高,表示運(yùn)行時(shí)的數(shù)據(jù)感測效果越好。如果分?jǐn)?shù)高于3,則表示校準(zhǔn)結(jié)果可接受,用戶可以進(jìn)行正常使用。
NextMind的等待時(shí)間有些長。時(shí)間之所以長,原因可能在于系統(tǒng)希望在執(zhí)行操作進(jìn)行數(shù)據(jù)傳輸前,確保用戶確實(shí)在查看系統(tǒng)所理解的內(nèi)容。
這意味著,從用戶開始查看對(duì)象,到對(duì)象被激活,最佳情況下需等待1~3秒。與NextMind互動(dòng)緩慢,意味著它不能在以速度為基礎(chǔ)的場景下使用,比如動(dòng)作游戲。換言之,想要準(zhǔn)確性,則需以失去速度為代價(jià)。
當(dāng)校準(zhǔn)結(jié)束后啟動(dòng)應(yīng)用程序時(shí),系統(tǒng)會(huì)不斷讀取用戶的腦電波,當(dāng)檢測到與校準(zhǔn)過程中識(shí)別的信號(hào)相似時(shí),會(huì)理解為用戶正在查看該信號(hào)。
目前NextMind支持的功能只能對(duì)特定對(duì)象信息進(jìn)行識(shí)別,并不能真正理解用戶正在查看的內(nèi)容。它無法知道用戶面前具體看的是周杰倫還是劉德華的臉。它只知道用戶正在查看某些特定模式。
圖源:網(wǎng)絡(luò)
雖然NextMind識(shí)別范圍限定性很強(qiáng),但同時(shí)可靠性得到了保證,能夠較為精準(zhǔn)、穩(wěn)定地識(shí)別經(jīng)過校準(zhǔn)測試后的對(duì)象。
所以從某種程度上來看,可將其理解為一個(gè)眼動(dòng)追蹤裝置,只是該裝置追蹤的不是人眼,而是腦電波。
此外,針對(duì)開發(fā)者,目前NextMind提供了相應(yīng)的Unity SDK,其帶有許多現(xiàn)成的預(yù)制件和示例場景,適用于VR和2D,并且具備很多功能,其中一項(xiàng)功能為模擬器:在進(jìn)行應(yīng)用程序調(diào)適時(shí),無需使用真實(shí)的傳感器,只需使用鼠標(biāo)并單擊鼠標(biāo)即可模擬凝視(按住鼠標(biāo)左鍵的次數(shù)越多,在該對(duì)象上的虛擬觀察越多)。
在Unity應(yīng)用程序中實(shí)現(xiàn)思維控制僅需向場景中添加NeuroManager預(yù)制,然后向需跟蹤的每個(gè)對(duì)象添加Neuro Tag腳本。Neuro Tag會(huì)確保對(duì)象閃爍,以便被識(shí)別。對(duì)Neuro Tag事件進(jìn)行定位,比如觸發(fā)對(duì)象后,便可實(shí)現(xiàn)所需的所有邏輯。編寫應(yīng)用程序非常容易,只需只分鐘便可開發(fā)出Unity Cube,如果注視Unity Cube,它會(huì)變大,當(dāng)注視移開時(shí),會(huì)再次恢復(fù)到原始大小。
Unity Cube(圖源:NextMind)
NextMind初體驗(yàn)
沒有讀心術(shù),但在VR中用神眼殺死了敵人
NextMind提供有許多2D演示,包括游戲、鍵盤、音樂創(chuàng)作等,這些都由大腦進(jìn)行交互。
從演示體驗(yàn)來看,軟件穩(wěn)定性好,偶爾會(huì)有延遲,這一點(diǎn)在游戲時(shí)體現(xiàn)的最為明顯。以演示游戲《Might Arkanoid》為例,想要準(zhǔn)確地接住球,需要提前三秒預(yù)測其軌跡。體驗(yàn)平臺(tái)游戲時(shí),用眼神殺死敵人會(huì)很痛苦。使用UI界面,比如創(chuàng)建音樂時(shí)情況會(huì)更好。
《Might Arkanoid》演示
在測試中還注意到另一個(gè)問題,在進(jìn)行體驗(yàn)時(shí),如果精神上稍作停頓,眼睛開始游離,設(shè)備會(huì)繼續(xù)會(huì)保持追蹤,將目光視為輸入,這個(gè)過程中可能會(huì)隨機(jī)激活其他操作。在進(jìn)行凝視驅(qū)動(dòng)的UX設(shè)計(jì)時(shí)應(yīng)將這種情況考慮進(jìn)去。
眼神的游離是一個(gè)較為常見的狀態(tài),不應(yīng)該用于觸發(fā)重要事件,可以調(diào)制為通過硬觸發(fā)(比如鼠標(biāo)單擊)進(jìn)行確認(rèn)。
演示的應(yīng)用程序當(dāng)中,有一款最令人滿足,用戶可在該程序中找到NextMind的3D模型以及一些“動(dòng)作點(diǎn)”,當(dāng)用戶將鼠標(biāo)懸在動(dòng)作點(diǎn)保持不動(dòng)時(shí),會(huì)有更多相關(guān)信息出現(xiàn)。這是一種較為理想的方案,就像在日常生活中一樣,使用凝視獲取更多上下文信息。
最后一款演示應(yīng)用程序是一款VR動(dòng)作游戲《Mindvasion》,用戶通過觀察外星人搏動(dòng)的大腦來射擊外星人。
VR動(dòng)作游戲《Mindvasion》
《Mindvasion》游戲玩法簡單,敵人移動(dòng)速度非常慢,會(huì)停留在某個(gè)位置,以便玩家更好地瞄準(zhǔn)他們頭部進(jìn)行射擊,并在傳感器所需求的時(shí)間內(nèi)殺死敵人。游戲不錯(cuò),但它再次證實(shí)目前并不是游戲理想的傳感器。
總結(jié)
整個(gè)體驗(yàn)下來,NextMind確實(shí)實(shí)現(xiàn)了用“意念”操作,但腦機(jī)接口技術(shù)目前仍處于早期階段,無法實(shí)現(xiàn)《刀劍神域》中的功能。
基于目前的腦機(jī)接口技術(shù),NextMind算得上其中一款非常好的設(shè)備。該公司在策略上選擇只提供一項(xiàng)功能,用眼睛選擇對(duì)象并將這一項(xiàng)功能做到很好,設(shè)備的準(zhǔn)確性高,可用性也很高,安裝簡單,學(xué)習(xí)起來很快,并向開發(fā)人員開放SDK。
唯一的問題在于檢測速度較慢,因此建議不要在對(duì)反應(yīng)時(shí)間要求高的應(yīng)用程序中使用它。
如果想開始嘗試使用高質(zhì)量且易于使用的大腦計(jì)算機(jī)設(shè)備,如果預(yù)算允許,NextMind比較適合。需要注意,NextMind仍然是一款實(shí)驗(yàn)性設(shè)備,如果需要在專業(yè)環(huán)境中追蹤用戶視線,更建議購買眼動(dòng)追蹤配件。
隨著大廠相繼曝出要加快推進(jìn)腦機(jī)接口設(shè)備商業(yè)化腳步,資本熱潮開始逐漸往這塊新興市場涌入,至于最終誰會(huì)成為最大受益者,現(xiàn)在還不得而知,但腦機(jī)接口與VR/AR的結(jié)合一定是眾多企業(yè)翹首布局的重要陣地。
NextMind是目前為數(shù)不多得以量產(chǎn)的腦機(jī)接口設(shè)備,盡管功能尚簡單,但從近期Facebook這些廠商放出的消息來看,更高階的腦機(jī)接口設(shè)備已經(jīng)具備了商業(yè)化落地和量產(chǎn)的資本,我們拭目以待。
參考鏈接:
https://skarredghost.com/2021/03/04/nextmind-review-bci-vr/
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請(qǐng)聯(lián)系微信:vrtuoluo233 申請(qǐng)授權(quán),并在轉(zhuǎn)載時(shí)保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實(shí)出處,如涉及版權(quán)問題,請(qǐng)聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺(tái)
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息