編譯/VR陀螺

在今年的WWDC23大會(huì)上，蘋果公司在介紹蘋果Vision Pro時(shí)推出了一項(xiàng)名為“Eyesight”的特殊功能。蘋果公司表示：“蘋果Vision Pro可以幫助你與周圍的人保持聯(lián)系。EyeSight可以顯示你的眼睛，讓附近的人知道你正在使用應(yīng)用程序或完全沉浸在體驗(yàn)中。當(dāng)有人靠近時(shí)，蘋果Vision Pro會(huì)同時(shí)讓你看到對(duì)方，并向?qū)Ψ秸故灸愕难劬Α?rdquo;

從技術(shù)上講，蘋果公司的Mike Rockwell是這樣描述Eyesight的：“我們認(rèn)真思考了佩戴Vision Pro時(shí)他人如何與你互動(dòng)的問題。Eyesight利用特別的弧形OLED面板和光柵透鏡，將你眼睛的正確視角投射給每一個(gè)注視你的人。其結(jié)果是，3D顯示屏使設(shè)備看起來(lái)像是透明的。”

近日，歐洲專利局公布了微軟一項(xiàng)新專利，標(biāo)題為“控制計(jì)算機(jī)生成的面部體驗(yàn)”。

微軟指出，他們的發(fā)明涉及顯示計(jì)算機(jī)生成的面部表情。其中一個(gè)例子提供了一種顯示計(jì)算機(jī)生成的面部表情的方法。該方法包括接收表情數(shù)據(jù)，并至少根據(jù)表情數(shù)據(jù)為用戶的眼睛區(qū)域生成一個(gè)或多個(gè)面部表情。該方法還包括在頭戴式設(shè)備的外部顯示屏上顯示眼睛區(qū)域的一個(gè)或多個(gè)面部表情。

微軟專利圖 11A 和 11B 展示了一個(gè)示例場(chǎng)景，在該場(chǎng)景中，頭戴式設(shè)備上的外部顯示屏被激活，并在顯示屏上打開計(jì)算機(jī)生成的面部表情，尤其是在眼睛區(qū)域。

圖源：patentlyapple

上面的微軟專利圖 12 顯示了配置為顯示計(jì)算機(jī)生成的面部表情的頭戴式設(shè)備示例的框圖；圖 13 顯示了顯示計(jì)算機(jī)生成的面部表情的示例方法的流程圖。

本專利中公開的示例涉及利用由一個(gè)或多個(gè)面部追蹤傳感器組成的面部追蹤系統(tǒng)，用于控制計(jì)算機(jī)生成的面部表情的顯示。

此外，從每個(gè)面部追蹤傳感器接收隨時(shí)間變化的數(shù)值，并根據(jù)接收到的數(shù)據(jù)確定每個(gè)面部追蹤傳感器的數(shù)值范圍，該數(shù)值范圍包括在一段時(shí)間內(nèi)（例如在滾動(dòng)時(shí)間窗口內(nèi)）接收到的最小值和最大值。系統(tǒng)會(huì)對(duì)值范圍和接收到的傳感器值進(jìn)行處理，將接收到的傳感器值轉(zhuǎn)換為混合形狀映射，其中混合形狀映射對(duì)應(yīng)于值范圍內(nèi)傳感器值的位置。

然后，至少根據(jù)混合形狀映射確定表達(dá)數(shù)據(jù)，并提供給一個(gè)或多個(gè)設(shè)備進(jìn)行展示。通過這種方式，一組面部追蹤傳感器可共同用于感知用戶表情的整體近似值，從而控制以虛擬化身形式呈現(xiàn)的表情。化身可以呈現(xiàn)給傳感器設(shè)備用戶以外的其他人。這可能有助于 AR和/或 VR環(huán)境中的人際交流。

想了解更多專利詳情，請(qǐng)查閱微軟完整的歐洲專利申請(qǐng) #WO/2023/219685。微軟的專利強(qiáng)烈暗示，他們可能正在開發(fā) HoloLens 之外的 XR 頭顯。如今的 HoloLens 允許外界看到 HoloLens 用戶的眼睛。因此，這項(xiàng)發(fā)明顯然不是為 HoloLens 而設(shè)計(jì)的。

此外，在2022 年 8 月，Meta的一項(xiàng)專利申請(qǐng)也顯示該公司正在開發(fā)一種在頭顯設(shè)備中查看用戶眼睛的方法，如下圖專利所示。

圖源：patentlyapple

來(lái)源：patentlyapple