編譯/VR陀螺

今天，美國專利商標(biāo)局公布了蘋果公司的一項(xiàng)專利申請，涉及生成物理環(huán)境的三維幾何表示，特別是涉及根據(jù)物理環(huán)境中檢測到的深度信息生成幾何表示的系統(tǒng)、方法和設(shè)備。

蘋果公司的專利從不使用蘋果的商標(biāo)來描述事項(xiàng)。其總是先進(jìn)行原始專利申請，然后才是商標(biāo)。雖然今天的專利從未提及 " Object Capture（對象捕捉）"，但在今年WWDC21的主題演講中，蘋果曾介紹過Object Capture，其描述的部分內(nèi)容可以在今天公布的專利申請中找到。

圖源：蘋果

蘋果公司早在6月的WWDC21上就介紹了Object Capture，其使用攝影測量法，在短短幾分鐘內(nèi)可以將一系列2D圖像變成逼真的3D對象。

今天曝光的這份蘋果專利申請名為 " Single-Pass Object Scanning（單程對象掃描）"，涵蓋了使用選定的圖像數(shù)據(jù)和深度數(shù)據(jù)子集生成三維模型的設(shè)備、系統(tǒng)和方法。三維模型是根據(jù)物理環(huán)境的圖像、物理環(huán)境中檢測到的深度信息以及其他用于追蹤設(shè)備/深度相機(jī)的特定位置和方向的信息生成的。

出于各種原因，可能需要排除包括基于運(yùn)動的缺陷的圖像和/或只包括選定的特定圖像集（例如，關(guān)鍵幀）。這樣做可以提供一個(gè)更有用、更真實(shí)或在物理上更有意義的對象模型。

本專利公開的一些實(shí)施方案涉及一種示范性的方法，即根據(jù)選定的圖像子集和與選定子集的每個(gè)圖像相對應(yīng)的深度數(shù)據(jù)生成一個(gè)對象的三維模型。該示例性方法涉及設(shè)備在包括對象的物理環(huán)境中移動期間獲取傳感器數(shù)據(jù)，該傳感器數(shù)據(jù)包括通過設(shè)備上的相機(jī)捕獲的物理環(huán)境的圖像。

例如，用戶在物理環(huán)境中圍繞一個(gè)對象（例如，鞋子或椅子）移動設(shè)備（例如，iPhone），以便從不同側(cè)面捕捉對象的圖像。在一些實(shí)施方案中，傳感器數(shù)據(jù)可以包括深度數(shù)據(jù)和運(yùn)動傳感器數(shù)據(jù)。

在一些實(shí)施方案中，設(shè)備包括一個(gè)用戶界面，在設(shè)備的移動過程中，用戶界面顯示捕獲的物理環(huán)境，包括物體（例如，實(shí)時(shí)視頻流），以及基于傳感器數(shù)據(jù)的物體初步3D模型。在一些實(shí)施方案中，初步的3D模型是在設(shè)備的移動過程中基于選定的圖像子集生成的，并且初步的3D模型可以與通過設(shè)備相機(jī)捕獲的物理環(huán)境的圖像同時(shí)顯示（例如，疊加在實(shí)時(shí)視頻流上的畫中畫）。

在一些實(shí)施方案中，物體三維模型是基于生成物體的網(wǎng)格、三維點(diǎn)云或體素表示生成的。

在一些實(shí)施方案中，傳感器數(shù)據(jù)包括物理環(huán)境的深度數(shù)據(jù)（例如，RGB-D）和光強(qiáng)圖像數(shù)據(jù)（例如，RGB）。

圖源：patentlyapple

蘋果的專利圖7是基于圖像子集和對應(yīng)于子集信息的圖像深度數(shù)據(jù)的3D模型示例生成的系統(tǒng)流程圖；圖8是基于圖像子集和與子集信息中的每個(gè)圖像相對應(yīng)的深度數(shù)據(jù)，生成3D模型實(shí)時(shí)預(yù)覽的示例系統(tǒng)流程圖。

想了解更多詳細(xì)內(nèi)容和細(xì)節(jié)，可查看蘋果公司這項(xiàng)專利申請?zhí)枮?0210264664的專利。

來源：patentlyapple