編譯/VR陀螺

WWDC2023期間發(fā)布的Vision Pro，其亮點之一是配備了Eyesight功能，它允許外界看到使用者的眼睛。近日的一個小組討論活動中，Vision Pro首席開發(fā)人員Mike Rockwell討論了Eyesight背后所涉及到的相關(guān)技術(shù)。

這個想法最早來自于蘋果的前首席設(shè)計師Jony Ive，不過其競爭對手Meta于2021年也曾展示了類似的方案。

Eyesight是通過一個前置顯示器實現(xiàn)的，通過顯示器可以實時看到頭顯用戶的眼睛。如果使用傳統(tǒng)2D顯示器，那么用戶的眼睛看起來就會不自然，這從側(cè)面看起來尤為明顯。

從Meta展示的方案可以看到，中間采用了傳統(tǒng)2D顯示器，右側(cè)則采用了光柵3D顯示器，兩者看起來效果截然不同。

三種方案對比，圖源：Meta

Rockwell指出，Eyesight采用了雙凸原理制成，它的顯示器是曲面的，這意味著它會根據(jù)外界觀看角度實時調(diào)整眼睛的圖像。

“我們需要為每個從任何角度觀看你的人創(chuàng)建相應的視圖，所以我們創(chuàng)建了一個透鏡顯示器，這是有史以來第一個曲面的透鏡顯示器，我們實際上為每個看著你的人進行渲染。”

用戶眼睛視圖數(shù)據(jù)可能來自兩方面：①頭顯內(nèi)置四顆眼動追蹤攝像頭進行實時記錄；②蘋果的寫實Avatar Persona。根據(jù)這些數(shù)據(jù)源，Vision Pro將會以最小的延遲創(chuàng)建眼睛區(qū)域的數(shù)字圖像，然后將其擴散到不同視角進行渲染。

由于Eyesight復雜度很高，所以在Vision Pro的真機佩戴活動中，暫未有該功能的實際體驗展示，估計蘋果還在進行相應的技術(shù)調(diào)整。根據(jù)一些專業(yè)用戶反饋，這項技術(shù)仍具有一定的局限性，如眼部區(qū)域的圖像看起來十分渾濁并且分辨率很低。

圖源：蘋果

不過，蘋果堅信圍繞這項技術(shù)的努力是值得的，因為蘋果正試圖打破VR頭戴設(shè)備虛擬與外界交流的藩籬。Rockwell指出，“你可以以自然的方式與進入房間的每個人進行互動，這真的很了不起。當人們看到它時，他們會認為該設(shè)備是透明的，而且它讓你覺得并不會與人分開，這是我們所要做的事情的一個基本價值。”

除了顯示用戶眼睛外，Eyesight還有自動淡入或者淡出圖像的能力，這具體取決于你全神貫注于沉浸式內(nèi)容還是與附近的人進行互動。如果有人靠近，此人會自動出現(xiàn)在你的視圖當中。

來源：Mixed