編譯/VR陀螺

近日，美國商標(biāo)專利局公布了蘋果公司一項(xiàng)專利，該專利涉及使用一個或多個關(guān)鍵幀進(jìn)行透視校正的方法和設(shè)備。

具體來說，該專利涉及在頭戴式設(shè)備上執(zhí)行透視校正的方法，該設(shè)備包括一個或多個處理器、非暫時性存儲器、圖像傳感器和顯示器。該方法包括使用圖像傳感器從各自的多個視角捕捉場景的多個圖像、使用圖像傳感器從當(dāng)前視角捕捉場景的當(dāng)前圖像、獲取場景當(dāng)前圖像的深度圖、使用一個或多個處理器，基于深度圖、圖像傳感器的當(dāng)前視角與用戶的當(dāng)前視角之間的差值，以及從各自的多個視角拍攝的多個場景圖像中的至少一個，轉(zhuǎn)換場景的當(dāng)前圖像。該方法還包括在顯示器上顯示轉(zhuǎn)換后的圖像。

在帶有顯示屏和場景攝像頭的 HMD 中，由于眼睛、顯示屏和攝像頭在空間中的位置不同，顯示屏上呈現(xiàn)給用戶的圖像可能并不總是能反映出與真實(shí)世界相同的圖像。這會導(dǎo)致在與真實(shí)世界交互時，出現(xiàn)距離感差、迷失方向以及手眼協(xié)調(diào)能力差等問題。

蘋果專利指出，在各種實(shí)施方案中，對眼睛、顯示器和攝像頭不同位置的補(bǔ)償是通過轉(zhuǎn)換場景攝像頭捕獲的圖像來實(shí)現(xiàn)的，這使呈現(xiàn)出來的圖像看起來就像在與用戶眼睛相同的位置捕獲的一樣（例如，使捕獲的圖像看起來就像用戶在未佩戴 HMD 時觀看場景一樣）。這種轉(zhuǎn)換可能是不完整的，因?yàn)榭赡軙幸恍┪矬w不在場景攝像頭的視場中。這就導(dǎo)致轉(zhuǎn)換后的圖像出現(xiàn)漏洞。不過，在不同的實(shí)施方案中，這些漏洞可以利用其他時間拍攝的其他圖像的信息來填補(bǔ)。

圖源：Apple Patent 11838486

圖 1 是根據(jù)某些實(shí)施方案的示例操作架構(gòu) #100 的框圖。作為一個非限制性示例，操作環(huán)境 #100 包括控制器 #110 和頭戴式設(shè)備 (HMD) #120。根據(jù)某些實(shí)施方案，當(dāng)用戶虛擬地和/或?qū)嶋H地存在于場景 #105 中時，HMD #120 向用戶呈現(xiàn) CGR 內(nèi)容。

在一些實(shí)施方案中，控制器 #110 被配置為管理和協(xié)調(diào)為用戶呈現(xiàn) CGR 內(nèi)容。在某些實(shí)施方案中，控制器 #110 包括軟件、固件和/或硬件的適當(dāng)組合。在另一個示例中，控制器 #110 包括在 HMD #120 的外殼內(nèi)。

在某些實(shí)施方案中，HMD #120 被配置為向用戶呈現(xiàn) CGR 內(nèi)容。HMD #120 包括軟件、固件和/或硬件的適當(dāng)組合。在某些實(shí)施方案中，控制器 #110 的功能由 HMD #120 提供和/或與 HMD #120 結(jié)合使用。

圖源：Apple Patent 11838486

專利圖 4 展示了與捕獲場景圖像和顯示捕獲的場景圖像相關(guān)的示例場景 #400。用戶佩戴的設(shè)備包括顯示屏 #410 和場景攝像頭 #430。場景攝像頭 #430 捕捉場景圖像（例如，用戶所在物理環(huán)境的圖片），顯示器 #410 向用戶的眼睛 #420 顯示場景圖像。場景攝像頭 #430 的視角（例如，場景攝像頭 #430 的圖像傳感器所在位置）與用戶的視角（例如，用戶眼睛 #420 所在位置）在垂直方向上偏移了一個垂直偏移量 #441。

此外，場景攝像頭 #430 的視角與用戶的視角在縱向上有一個偏移量 #442。此外，在各種實(shí)施方案中，場景攝像頭 #430 的視角與用戶視角之間存在橫向偏移（例如，進(jìn)入或離開圖 4 中的頁面）。

想了解更多專利詳情，可查閱蘋果專利申請11838486。

圖源：Apple Patent 11838486