2025年2月28日,Meta公司發(fā)布了智能眼鏡Aria Gen2,細(xì)心地朋友會發(fā)現(xiàn)一個非常有意思的事情——Aria Gen2并沒有保留Orion支持的顯示功能,而是徹底去掉了顯示,然而這并不是最有趣的,更讓人深思的是,Aria Gen2保留了眼球追蹤功能,而且作為重點(diǎn)功能之一進(jìn)行介紹。
AR/AI圈內(nèi)的大部分人士是比較認(rèn)可在AR中采用眼球追蹤進(jìn)行交互的,但是在沒有顯示的AI眼鏡上,眼球追蹤能起到什么重要作用,即使AR/AI眼鏡圈里的人,很多可能也是云里霧里。雖然Aria Gen2明確不會向消費(fèi)者銷售,只是作為一款研究導(dǎo)向的眼鏡推廣,但是即使這樣,Aria Gen2仍然向業(yè)界發(fā)出了一個明確的信息——在AI智能眼鏡上,眼球追蹤比顯示更重要、更緊急。
作為專注眼球追蹤領(lǐng)域16年的公司——七鑫易維,在這個問題上其實(shí)早有預(yù)判,并且在Aria Gen2發(fā)布之前,已經(jīng)公開了其AI智能眼鏡的眼球追蹤解決方案,在即使沒有顯示的情況下,其應(yīng)用場景仍然是清晰明確的,甚至,數(shù)量還不少。下面我們不妨站在Aria Gen2的角度,逐條列舉并分析一下:
高效且精準(zhǔn)的AI交互
在Meta Ray-ban這個產(chǎn)品上,用戶可以將前置攝像頭拍攝的照片發(fā)送給Meta的大模型,實(shí)現(xiàn)多模態(tài)的AI交互,具體案例這里就不列舉了,因?yàn)闃I(yè)內(nèi)很多人是嘗試過的。但是,不僅僅是客戶,估計連Meta自己,也發(fā)現(xiàn)了一個問題,就是基于這種圖片的交互,其交互效率非常低下,為什么呢?因?yàn)锳I會針對整個照片進(jìn)行分析然后再回答,如果用戶沒有通過語言清晰指出其交互內(nèi)容,AI只能把所有照片或視頻中的元素進(jìn)行一一列舉。
我們不妨舉一個經(jīng)常在AI多模態(tài)中用到的一個小例子,在一片花海中,有一朵我們不認(rèn)識的花,然后問Meta Ray-ban這個花是什么花,然后Meta Ray-ban拍到的是很多種花,它除了一一列舉,似乎也沒有更好的辦法,而用戶只能想辦法將頭湊得更近,將花的顏色形狀描述的更清晰,總之,用戶體驗(yàn)非常之差。
Aria Gen2利用眼球追蹤巧妙的解決了這個問題,因?yàn)樗烙脩舻淖⒁饬υ谀睦?。?dāng)用戶和AI進(jìn)行基于視覺的交互時,AI大模型不僅僅獲取到了用戶的視覺信息,還知道用戶的注視點(diǎn)在什么地方。那么AI大模型就不需要再對整個圖片進(jìn)行分析,而僅僅需要對用戶所注視的這個物體或小區(qū)域進(jìn)行分析。這就大幅度了提升了交互的效率,從而讓用戶體驗(yàn)大幅度提升。
雖然用戶注視的是一個人,但傳統(tǒng)AI交互需要將整幅圖像傳輸并進(jìn)行分析
結(jié)合眼球追蹤,只需要傳輸并分析注視的一小部分內(nèi)容
更有趣的是,這種交互方式不僅僅是提升交互效率,因?yàn)樗辛擞脩舻淖⒁朁c(diǎn)信息,我們不需要將整個圖片都傳輸給大模型,我們只需要傳輸一小部分,這會大幅度降低傳輸?shù)臄?shù)據(jù)量,從而降低傳輸延遲,同時,也會大幅度降低大模型資源的使用,大模型的反饋時間也會縮短,同樣會降低整體的延遲,而且,不管是傳輸數(shù)據(jù)的壓縮還是算力的壓縮,都會降低對眼鏡端功耗的需求。從用戶角度看,AI眼鏡回答的更快了,續(xù)航更長了。
當(dāng)然,加了眼球追蹤,AI智能眼鏡的交互還有其他一些可以加的巧思,比如在控制智能設(shè)備的時候,尤其是多個同種類型設(shè)備,視線就可以當(dāng)作一個選擇指向使用,從而知道用戶具體是要操控哪個設(shè)備;再如,在拍照和錄像的時候,注視點(diǎn)可以作為拍攝焦點(diǎn),而且在焦點(diǎn)偏離過大的時候可以做出提醒(畢竟沒有取景框)。
七鑫易維目前已經(jīng)實(shí)現(xiàn)了上述方案的整個流程,通過自研的AI Agent,接入了諸如DeepSeek、ChatGPT、Qwen等各種大模型,結(jié)合注視點(diǎn),大幅度提升了交互精確性,降低了交互延遲。
視覺健康的保駕護(hù)航
除了眼球追蹤,大家還會發(fā)現(xiàn),Aria Gen2在鼻托處新增了光電容積脈搏檢測(PPG)傳感器,可以實(shí)現(xiàn)連續(xù)心率監(jiān)測。Aria Gen2這是要搶智能手表和智能手環(huán)的市場。既然智能手表和手環(huán)可以做健康,眼鏡也同樣是佩戴在身體上的,為什么不能做呢?甚至,智能眼鏡離人體的中樞(腦袋)更近,而腕部和指部設(shè)備顯著有億點(diǎn)點(diǎn)遠(yuǎn)了。
眼球追蹤和什么健康相關(guān)呢?我們第一個想到的肯定是視覺健康。在數(shù)字化時代,青少年用眼過度已成為普遍問題,我們甚至可以看到大量的小孩子就開始戴著近視鏡。眼球追蹤可以實(shí)時監(jiān)測用戶的用眼距離、用眼時長、眼睛疲勞度,還可以監(jiān)測眼睛是否存在弱視、斜視,利用該項技術(shù),可以大幅度降低用戶,尤其是青少年,近視、弱視甚至斜視的比例。
七鑫易維和多家眼科醫(yī)院聯(lián)合,推出基于眼球追蹤的近視預(yù)防、弱視斜視監(jiān)測的解決方案,讓青少年養(yǎng)成健康的用眼習(xí)慣,在學(xué)習(xí)和生活中更輕松地保護(hù)眼睛,遠(yuǎn)離視力危機(jī)。
認(rèn)知健康的監(jiān)測
相對來講,視覺健康大家更容易理解,而眼球追蹤和認(rèn)知健康的關(guān)系可能很多人是不清楚的,但認(rèn)知領(lǐng)域的專家卻非常重視眼球追蹤,因?yàn)樵S多神經(jīng)系統(tǒng)疾病在早期就會表現(xiàn)出特定的眼動特征,通過AI分析眼動模式,可用于認(rèn)知障礙篩查、神經(jīng)退行性疾病早期預(yù)警、注意力與記憶力評估等多個健康領(lǐng)域。相比傳統(tǒng)檢測方式,眼動追蹤能夠更早發(fā)現(xiàn)潛在風(fēng)險,輔助醫(yī)療診斷,實(shí)現(xiàn)非侵入式、便捷高效的認(rèn)知健康監(jiān)測,為個體和醫(yī)療機(jī)構(gòu)提供更智能的健康管理工具。
Meta是否已經(jīng)和認(rèn)知領(lǐng)域?qū)<液献魑覀儾⒉磺宄?,但是七鑫易維早在十年前就已經(jīng)和大量高校、研究機(jī)構(gòu)的認(rèn)知專家進(jìn)行合作,推出了各類專業(yè)的監(jiān)測方案和監(jiān)測設(shè)備,如七鑫易維和上海交通大學(xué)合作,通過眼動數(shù)據(jù)研究自閉癥、阿爾茨海默病和患者認(rèn)知與視覺行為的影響。這類方案具有非常高的社會推廣價值和商業(yè)推廣價值。
絲滑無感的支付體驗(yàn)
Aria Gen2是否支持虹膜識別并沒有媒體透露,筆者大膽猜測,大概率是支持的。因?yàn)?strong>眼球追蹤和虹膜識別完全可以用相同的一套硬件系統(tǒng)實(shí)現(xiàn),其增值功能成本接近于0,為什么不加呢?而且,對于眼鏡這種類型的產(chǎn)品來講,最好的身份認(rèn)證方式,必然是虹膜識別,因?yàn)楹缒ぷR別安全性遠(yuǎn)遠(yuǎn)高于指紋識別,而且不需要額外的動作,畢竟就戴在眼前,人臉識別就更不需要比較了,因?yàn)檠坨R沒辦法捕捉到全臉。
尤其是在支付領(lǐng)域,支持虹膜識別的AI智能眼鏡可以實(shí)現(xiàn)絲滑無感的支付體驗(yàn),我們不妨想象一下,當(dāng)我們帶著AI眼鏡購物時,我們只需要拿起商品用AI前置攝像頭進(jìn)行掃碼,就放到了“虛擬的購物車”中,選購?fù)瓿珊?,我們只需要通知AI眼鏡進(jìn)行結(jié)賬即可,AI眼鏡會通過虹膜識別進(jìn)行身份認(rèn)證,然后打通整個支付鏈條,從而完成支付。
你看,我們既不需要收銀員,也不需要收銀設(shè)備,我們只需要到商店,把東西拿起來,然后出門就可以了,沒有店員會追打你,因?yàn)楹笈_已經(jīng)告訴店員你結(jié)過賬了。
七鑫易維目前已經(jīng)和虹膜識別廠家、支付廠家合作,推出可以打通整個支付鏈條的AI/AR眼鏡支付解決方案。
潛力巨大的商業(yè)分析市場
用戶數(shù)據(jù)肯定是商家垂涎欲滴的寶貝,而眼動數(shù)據(jù)是這批寶貝中的寶貝,因?yàn)樗嬖V別人的信息太多了,商業(yè)應(yīng)用的想象力空間太大了。當(dāng)然,重要的前提是,我們不能不告而取,必須在用戶允許的情況下使用這些數(shù)據(jù)。
這些數(shù)據(jù)不僅僅能告訴我們用戶的消費(fèi)信息,用于商業(yè)分析、廣告分析、用戶體驗(yàn)分析、消費(fèi)者心理分析等,還可以用于很多特定的行業(yè)中,比如可以用于工作質(zhì)量的監(jiān)督,因?yàn)橛泻芏嗟墓ぷ?,我們很難通過其他量化的手段來監(jiān)督工作者的工作是否合格,是否合規(guī),或者是否安全,但眼球追蹤可以實(shí)現(xiàn)這一切,實(shí)時監(jiān)督工作過程中的工作質(zhì)量、合規(guī)性和安全性,從而提升工作效率,提高工作質(zhì)量和工作安全性。
七鑫易維在多年前就已經(jīng)推出自研的商業(yè)分析眼動平臺aSee Studio,和很多的商業(yè)分析領(lǐng)域進(jìn)行了深度的合作,數(shù)據(jù)驅(qū)動決策,讓每一次選擇更智能、更高效,助力企業(yè)在快速變化的市場中搶占先機(jī)。
提高駕駛安全
AI智能眼鏡還真的有可能去搶占傳統(tǒng)DMS(駕駛員監(jiān)控系統(tǒng))的市場,Aria Gen2肯定也意識到了這一點(diǎn)。和傳統(tǒng)DMS系統(tǒng)相比,AI智能眼鏡離人眼更近,可以更精準(zhǔn)的判斷用戶的注意力和疲勞度,甚至可以更早發(fā)現(xiàn)司機(jī)的疲勞,從而大幅度提升駕駛安全性。同時,AI智能眼鏡還能發(fā)現(xiàn)傳統(tǒng)DMS很多無法捕捉的駕駛狀況信息,和注意力進(jìn)行結(jié)合,更進(jìn)一步提升駕駛的安全性。
七鑫易維也推出了自研的基于眼球追蹤的DMS系統(tǒng),既包括AI眼鏡形態(tài)的,也包括傳統(tǒng)的車載形態(tài)的,至于哪種形態(tài)未來會更加流行,倒也不必太擔(dān)心,畢竟七鑫易維都有。
具身智能數(shù)據(jù)采集
Aria Gen2在發(fā)布文稿中提到,其產(chǎn)品旨在推動機(jī)器感知、以用戶為中心的情境人工智能以及機(jī)器人技術(shù)的發(fā)展。聽起來很高深,我不妨簡單翻譯一下,如果想讓機(jī)器人和人一樣,那么就需要采集大量人的數(shù)據(jù),從而用于機(jī)器人的訓(xùn)練。人眼作為人類注意力和思維的核心傳輸通道,必然是機(jī)器人學(xué)習(xí)的重點(diǎn)內(nèi)容之一。不知道Meta將AI智能眼鏡交給用戶的時候會不會簽署相關(guān)的數(shù)據(jù)安全協(xié)議,會不會提到用于機(jī)器人訓(xùn)練,希望是會的,不要像之前那樣出現(xiàn)什么紕漏。
前面總結(jié)了七個應(yīng)用場景,總起來說,不管有沒有顯示,對于AI眼鏡來講,眼球追蹤都是必不可少的。Meta的AR研究項目管理總監(jiān) Mingfei Yan 表示,“我們正通過 Aria Gen 2 智能眼鏡致力于構(gòu)建‘能夠更深刻理解佩戴者情境和環(huán)境’的 AI 產(chǎn)品。”從這句話,我們就可以分析出Aria Gen2為什么寧可去掉顯示,也不會去掉眼球追蹤的核心邏輯。
目前,已經(jīng)有多個型號的AI智能眼鏡產(chǎn)品正在和七鑫易維合作,集成眼球追蹤功能。眼球追蹤技術(shù)不僅是AI眼鏡的交互革命,更是打開“以人為中心”智能生態(tài)的鑰匙。對廠商而言,它是產(chǎn)品差異化的核心武器;對投資人而言,它是穿越周期的黃金資產(chǎn)。當(dāng)視線成為數(shù)據(jù)入口,率先布局者將定義下一代人機(jī)交互的規(guī)則。
關(guān)于七鑫易維
北京七鑫易維科技有限公司專注于高精度眼動追蹤傳感器與AI算法的研發(fā),致力于打造全球最先進(jìn)的眼動追蹤解決方案。作為該領(lǐng)域的技術(shù)先鋒,七鑫易維不僅推動了AI交互邏輯的革新,更在行業(yè)標(biāo)準(zhǔn)制定中發(fā)揮了關(guān)鍵作用。
在Meta、蘋果等科技巨頭加速布局眼動追蹤技術(shù)的同時,七鑫易維早已完成全鏈路技術(shù)突破,并率先實(shí)現(xiàn)商業(yè)化落地。無論是AI硬件廠商、智能終端企業(yè),還是希望借助眼動技術(shù)提升產(chǎn)品競爭力的合作伙伴,七鑫易維都能提供成熟、可落地的全棧式解決方案,助力企業(yè)在下一代智能交互賽道占領(lǐng)先機(jī),定義未來行業(yè)格局。
*聲明:企業(yè)通稿非VR陀螺官方稿,法律問題一切與VR陀螺無關(guān)。
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息