編譯/VR陀螺

早在2015年，就有傳言稱蘋果公司悄悄收購了一家名為 "Faceshift "的實(shí)時(shí)動(dòng)作捕捉公司。該技術(shù)后來很可能被用來創(chuàng)造Animoji和Memoji。然后在2019年，蘋果收購了IKinema，這是一家了不起的公司，它生產(chǎn)的技術(shù)可以讓化身模仿用戶全身動(dòng)作和詳細(xì)的面部表情。

去年夏天，蘋果公司獲得了11,062,476號(hào)專利，該專利是由蘋果公司收購Metaio后的兩名工程師推動(dòng)的。在該專利的背景中，蘋果表示："頭戴式設(shè)備（HMD）為用戶提供沉浸式CGR體驗(yàn)。一些CGR體驗(yàn)需要知道用戶的身體姿勢(shì)。例如，一些CGR體驗(yàn)展示了一個(gè)模仿用戶行為的用戶虛擬化身。如果用戶移動(dòng)他們身體的某一部分，化身就會(huì)移動(dòng)相應(yīng)的部分。"這與IKinema的技術(shù)完全吻合。

昨天，美國專利商標(biāo)局公布了蘋果公司的一項(xiàng)專利申請(qǐng)，題為 "在三維環(huán)境中呈現(xiàn)虛擬化身"。蘋果專利的一部分涵蓋了手部追蹤/手勢(shì)追蹤，這是郭明錤在一份關(guān)于蘋果第二代頭顯產(chǎn)品的新報(bào)告中強(qiáng)調(diào)的功能。此外，該專利第二個(gè)涉及的方面還包括眼球追蹤。

蘋果這份專利真正有趣的地方是從專利圖7A開始的，該專利描述了在動(dòng)畫電影場(chǎng)景中對(duì)用戶（演員）的拍攝。

圖源：patentlyapple

蘋果公司的專利圖7A描述了一個(gè)用戶#701站在真實(shí)環(huán)境#700中，雙臂抬起，用戶的左手拿著一個(gè)杯子#702。在一些實(shí)施方案中，真實(shí)環(huán)境是一個(gè)動(dòng)作捕捉工作室，它包括攝像機(jī)705-1、705-2、705-3和705-4，用于捕捉數(shù)據(jù)（例如，圖像數(shù)據(jù)和/或深度數(shù)據(jù)），可用于確定用戶的一個(gè)或多個(gè)部分的姿勢(shì)。

用戶各部分的姿勢(shì)被用來確定CGR環(huán)境中相應(yīng)的虛擬化身角色（例如，見圖7C中的化身721的姿勢(shì)），例如在一個(gè)動(dòng)畫電影場(chǎng)景內(nèi)。

在蘋果公司的專利圖7B和7C中，蘋果公司指出了一個(gè) "確定圖"（#710），它是計(jì)算機(jī)系統(tǒng)對(duì)部分用戶的確定姿勢(shì)的可視化表示。換句話說，確定圖表示使用計(jì)算機(jī)系統(tǒng)確定的用戶身體不同部分的位置確定性的計(jì)算估算（例如，用戶身體部分的估計(jì)位置是正確的概率）。

確定圖是人體的模板，它代表了人類的基本特征，如頭、頸、肩、軀干、手臂、手、腿和腳。

在一些實(shí)施方案中，確定圖表示各種子特征，如手指、肘部、膝蓋、眼睛、鼻子、耳朵和嘴巴。確定圖的人體特征對(duì)應(yīng)于用戶的身體特征。

圖源：patentlyapple

蘋果公司的專利圖10A描述了一個(gè)例子，其中用戶在CGR環(huán)境中被表示為虛擬化身角色，這些化身角色具有基于不同外觀模板的外觀。

在一些實(shí)施例中，虛擬化身具有基于人物模板或抽象模板的外觀。在一些實(shí)施例中，化身通過改變姿勢(shì)來改變外觀。在一些實(shí)施例中，化身通過在角色模板和抽象模板之間的轉(zhuǎn)換來改變外觀。

圖源：patentlyapple

蘋果公司的專利圖12是一個(gè)示例性的方法（#1200）流程圖，用于呈現(xiàn)具有基于不同外觀模板的虛擬化身。

該方法（#1200）可以在與顯示生成組件通信的iPhone、iPad、MR頭顯上執(zhí)行。在一些實(shí)施例中，該方法可適用于視覺輸出設(shè)備、3D顯示器、透明顯示器、投影儀、平視顯示器、顯示控制器或觸摸屏。

蘋果進(jìn)一步指出，虛擬化身的模板可以是人類、卡通人物或非人類人物的擬人化構(gòu)造，如狗、機(jī)器人等。

蘋果可以將這項(xiàng)技術(shù)用于專利中所述的未來Apple TV+產(chǎn)品，但它將如何應(yīng)用于蘋果設(shè)備目前尚不明確。未來的iPhone和iPad是否會(huì)提供多個(gè)TrueDepth攝像頭？蘋果是否會(huì)出售用于家庭工作室的專業(yè)獨(dú)立深度相機(jī)？雖然只有時(shí)間能說明問題，但總的來說這是一個(gè)迷人的專利，總有一天會(huì)真正進(jìn)入市場(chǎng)。

要了解更多關(guān)于這項(xiàng)專利的細(xì)節(jié)，可查閱蘋果專利20210382544。 考慮到這是一項(xiàng)專利申請(qǐng)，目前還不清楚包含該專利技術(shù)的產(chǎn)品何時(shí)會(huì)上市。

來源：patentlyapple