編譯/VR陀螺

近日，美國專利商標(biāo)局公布了蘋果公司的一項(xiàng)新專利申請，題為“使用高效圖像捕捉和聚散度以及瞳孔間距離歷史記錄進(jìn)行眼動追蹤”。該發(fā)明涉及蘋果 Vision Pro 或未來智能眼鏡形式的 HMD。

蘋果公司的發(fā)明涵蓋了通過交錯捕捉每只眼睛的圖像，并在捕捉期間預(yù)測用戶眼睛的特征，從而追蹤用戶眼睛特征（如注視方向或瞳孔位置）的實(shí)現(xiàn)方法。

用戶眼睛的圖像以錯開的方式進(jìn)行捕獲，即第二只眼睛的圖像在第一只眼睛的圖像捕獲時間之間進(jìn)行捕獲，反之亦然。

一些實(shí)施方案提供了一種設(shè)備，可通過交錯捕捉每只眼睛的圖像來追蹤用戶兩只眼睛的注視方向，并使用聚散歷史來預(yù)測捕捉期間的中間幀中另一只眼睛的注視方向。

例如，為了以 N 幀/秒的速率確定雙眼的注視方向，可以以 N/2 幀/秒的速率交錯捕捉每只眼睛的圖像，第一只眼睛和第二只眼睛的圖像捕捉之間間隔 1/N 秒，并且可以根據(jù)另一只眼睛在每個中間幀時間的注視方向和當(dāng)時的預(yù)測聚散度來預(yù)測每只眼睛在幀之間的中間注視方向。

在一個示例中，設(shè)備包括一個或多個圖像傳感器，配置為交錯捕獲用戶第一只眼睛和第二只眼睛的圖像，其中第一只眼睛的圖像在捕獲時間以大約第一幀速率捕獲，第二只眼睛的圖像在第一只眼睛圖像的捕捉時間之間捕捉。

某些實(shí)施方案提供了一種設(shè)備，可通過交錯捕捉每只眼睛的圖像來追蹤用戶兩只眼睛的瞳孔位置，并使用瞬時 IPD 來預(yù)測中間幀的另一只眼睛的瞳孔位置。

例如，要以 N 幀/秒的速度確定雙眼的瞳孔位置，可以 N/2 幀/秒的速度交錯捕捉每只眼睛的圖像，并根據(jù)每幀中間時間另一只眼睛的瞳孔位置和當(dāng)時預(yù)測的瞬時 IPD 預(yù)測每只眼睛幀間的中間瞳孔位置。

蘋果公司的專利圖 1 展示了一個用于追蹤用戶眼睛的示例設(shè)備。圖 1 展示了使用具有兩個眼部攝像頭 #120a 和 #120b （每只眼睛一個攝像頭）的設(shè)備（#100）追蹤用戶的兩只眼睛 #125a 和 #125b。

該設(shè)備（例如眼鏡設(shè)備或其他HMD）包括兩個眼部攝像頭（#120a 和 #120b）、兩個照明器（#122a 和 #122b）和兩個內(nèi)容查看部分（#130a 和 #130b）。這些組件可以嵌入或連接到設(shè)備#100的外殼或其他部分。例如，如果設(shè)備#100是眼鏡設(shè)備，兩個眼部攝像頭和照明器可以嵌入眼鏡設(shè)備的框架部分（未顯示），該框架部分環(huán)繞或支撐兩個內(nèi)容查看部分。

圖源：patentlyapple

蘋果專利圖 2 展示了捕捉眼球圖像用于眼動追蹤的示例時間軸。

下面的蘋果專利圖 7 展示了單眼水平注視角示例；圖 8 展示了水平聚散度示例；圖 9 展示了用于確定垂直聚散的單眼垂直注視角示例。

圖源：patentlyapple

蘋果專利圖 10 是追蹤眼睛特征方法的流程圖；圖 11 是圖 1 示例設(shè)備的組件框圖。

想要更深入了解蘋果公司的發(fā)明，請查閱蘋果公司的專利申請?zhí)?0230239586。

來源：patentlyapple