編譯/VR陀螺

據(jù)最新曝光的專利，蘋果公司正在開發(fā)一種系統(tǒng)，該系統(tǒng)可以根據(jù)平面視頻內(nèi)容生成混合現(xiàn)實(shí)或虛擬現(xiàn)實(shí)環(huán)境，使用戶可以瀏覽和探索片段。

這項(xiàng)專利由美國(guó)專利商標(biāo)局于日前發(fā)表，研究主題是“一種用于生成平面視頻內(nèi)容的合成現(xiàn)實(shí)重建的方法和設(shè)備”。該專利將合成現(xiàn)實(shí)（synthesized reality，簡(jiǎn)稱SR）定義為數(shù)字生成的對(duì)象和環(huán)境。SR本質(zhì)上是蘋果所指的一個(gè)廣泛類別，包括虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)。

用戶可以在設(shè)備上參與SR體驗(yàn)，無(wú)論通過(guò)是iPhone或iPad等手持設(shè)備，還是傳聞中的“ Apple Glass”等頭戴式設(shè)備。他們可以通過(guò)一種或多種感覺（包括視覺、味覺、嗅覺和觸覺）與SR環(huán)境互動(dòng)。

該專利的大部分重點(diǎn)集中在可以從平面視頻內(nèi)容生成SR角色、對(duì)象和環(huán)境的系統(tǒng)上。換句話說(shuō)，該系統(tǒng)可以將電視節(jié)目變成VR環(huán)境，用戶可以使用上述設(shè)備進(jìn)行瀏覽。

“用戶可能希望體驗(yàn)視頻內(nèi)容（例如電視劇集或電影），就像他們和角色一起在場(chǎng)景中一樣。換句話說(shuō)，用戶希望將視頻內(nèi)容視為SR體驗(yàn)，而不是簡(jiǎn)單地觀看電視或其他顯示設(shè)備上的視頻內(nèi)容。”

如蘋果所述，大多數(shù)SR內(nèi)容是“精心制作”的，并已添加到用戶可以選擇的內(nèi)容庫(kù)中。然而，該專利描述了一種用于通過(guò)“利用數(shù)字資產(chǎn)”以“無(wú)縫且快速地”將平面內(nèi)容移植到SR體驗(yàn)中來(lái)生成按需SR內(nèi)容重建方法。

該系統(tǒng)通過(guò)識(shí)別場(chǎng)景中的“情節(jié)效應(yīng)者”，合成場(chǎng)景描述并通過(guò)“根據(jù)場(chǎng)景的場(chǎng)景描述來(lái)驅(qū)動(dòng)與第一情節(jié)效應(yīng)者相關(guān)聯(lián)的第一數(shù)字資產(chǎn)來(lái)生成場(chǎng)景的重構(gòu)。”

正如蘋果公司指出的那樣，數(shù)字資產(chǎn)可能與“情節(jié)效應(yīng)者”的模型相對(duì)應(yīng)-它被定義為視頻內(nèi)容中的角色或演員。

雖然系統(tǒng)可以基于視頻內(nèi)容生成SR重建，但它也可以從關(guān)聯(lián)的文本內(nèi)容和外部數(shù)據(jù)中提取信息。可能是視頻片段中演員的照片、身高，場(chǎng)景的各種視圖以及其他數(shù)據(jù)。

“在某些實(shí)現(xiàn)中，數(shù)字資產(chǎn)是至少部分基于視頻內(nèi)容和與視頻內(nèi)容相關(guān)聯(lián)的外部數(shù)據(jù)即時(shí)生成的。在一些實(shí)現(xiàn)中，與視頻內(nèi)容相關(guān)聯(lián)的外部數(shù)據(jù)對(duì)應(yīng)于演員的圖片、角色的身高和其他尺寸、布景和物體的各種視圖（例如，平面圖、側(cè)視圖、透視圖等視圖）等。”

有趣的是，蘋果公司還指出，類似的SR生成系統(tǒng)可以基于音頻和相關(guān)內(nèi)容（包括有聲讀物，廣播劇和其他純音頻內(nèi)容）創(chuàng)建交互式場(chǎng)景。

專利的幾個(gè)部分還詳細(xì)說(shuō)明了動(dòng)作對(duì)象（或角色與之交互的對(duì)象）與不動(dòng)作對(duì)象之間的區(qū)別。這種區(qū)別可以使SR系統(tǒng)提前知道場(chǎng)景中需要交互的對(duì)象類型。

該專利列出了發(fā)明者Ian M. Richter、Daniel Ulbricht、Jean-Daniel E. Nahmias、Omar Elafifi和Peter Meier。

蘋果每周都會(huì)申請(qǐng)大量專利，并且不能保證其中描述的技術(shù)會(huì)成功推向市場(chǎng)。同樣，專利申請(qǐng)也并未說(shuō)明蘋果何時(shí)會(huì)將使用該技術(shù)的新產(chǎn)品推向市場(chǎng)。

來(lái)源：appleinsider