此前，盡管蘋果目前還未推出有關(guān)的 AR/VR 產(chǎn)品，但暗地里一直積極地布局，例如申請相關(guān)技術(shù)專利，收購其他技術(shù)公司等等。庫克也多次對外表示十分看好 AR 。外界也不斷地猜測蘋果到底會做出一款什么樣的產(chǎn)品。 直到今年 3 月份，彭博社的一篇報道證實(shí)了蘋果的 AR 布局。 關(guān)于產(chǎn)品方面，彭博社確認(rèn)蘋果手機(jī)將率先支持 AR 功能。另一方面，蘋果也正在研發(fā)數(shù)款 AR 產(chǎn)品，其中包括數(shù)字眼鏡，可與手機(jī)無線連接，并為用戶呈現(xiàn)電影、地圖等內(nèi)容。聽起來有些像以前的谷歌眼鏡，但比起手機(jī)的 AR 功能，蘋果 AR 眼鏡等待的時間要更久。 另外，報道提到蘋果正在為 iPhone 研發(fā)的一項(xiàng)功能是，改變所拍照片或是照片中特定物體的景深；另一項(xiàng)功能是，對照片進(jìn)行摳圖，如可摳出人像的頭部，對其 180 度翻轉(zhuǎn)。 這其中可能會加入 AR，生成虛擬特效，類似于 Snapchat 的效果。為此，iPhone 攝像頭將有望依賴于深度感知技術(shù)，并且使用由 PrimeSense 公司研發(fā)的算法。 或許，蘋果不會一次性推出所有這些功能，但現(xiàn)在 iPhone 8 證實(shí)將采用 3D 感知技術(shù)，想必這也是蘋果向 AR 邁出的一小步。 同時，回顧過去蘋果的一些動作，我們能發(fā)現(xiàn)，蘋果針對 AR 的人才和技術(shù)儲備愈加完善。 人才儲備

Mike Rockwell 2015 年加入蘋果

根據(jù)彭博社引述知情人士的報道，蘋果已經(jīng)組建了一支研發(fā)團(tuán)隊(duì)，該團(tuán)隊(duì)聚集了各路硬軟件研發(fā)的老兵。而早在去年 1 月，曾有報道蘋果當(dāng)時正在組建一個數(shù)百名的 “秘密研發(fā)團(tuán)隊(duì)”，對虛擬現(xiàn)實(shí)頭盔等其他技術(shù)進(jìn)行試驗(yàn)。 該團(tuán)隊(duì)由前杜比執(zhí)行副總裁 MiKe Rockwell 負(fù)責(zé)，他曾是杜比的標(biāo)志性人物，擔(dān)任過 AR 公司 Meta 的顧問。作為蘋果內(nèi)部 AR 團(tuán)隊(duì)的負(fù)責(zé)人，Rockwell 向 Dan Riccio 報告工作，而 Riccio 主要負(fù)責(zé) iPhone 和 iPad 硬件工程團(tuán)隊(duì)的工作。 從去年開始，蘋果陸續(xù)將其他軟硬件部門的人調(diào)往 AR 團(tuán)隊(duì)，包括曾負(fù)責(zé)蘋果手表設(shè)計的 Fletcher Rothkopf，創(chuàng)建了 THX 標(biāo)準(zhǔn)（一種音效標(biāo)準(zhǔn)，）的 Tomlinson Holman。 蘋果還請了從 3D 視頻到可穿戴硬件各方面的人才加入，包括前亞馬遜 Lumberyard 虛擬現(xiàn)實(shí)平臺首席工程師 Cody WHite，前 Meta 軟件開發(fā)總監(jiān) Duncan McRoberts，前 Oculus 分析師 Yury Petrov，以及曾在 HoloLens 和 Google Earth 工作過的 Avi Bar-Zeev。 這支團(tuán)隊(duì)中也加入了前維塔視覺特效公司成員，他們曾參與過《阿凡達(dá)》、《金剛》等影片的制作。 技術(shù)儲備 這一點(diǎn)主要體現(xiàn)為蘋果收購其他公司，以及專利申請。

FaceShift 的面部識別

以下是蘋果從 2013 年到 2016 年陸續(xù)收購的一系列公司：

• 2013 年 11 月 收購以色列硬件公司 PrimeSense該公司主要為微軟的 Xbox 游戲機(jī)制造 Kinect 動感捕捉攝像頭。
• 2014 年 12 月 收購臉部視覺識別公司 FaceShift該公司的技術(shù)能夠利用攝像頭對用戶臉部圖像進(jìn)行實(shí)時捕捉，甚至可以生成虛擬的頭像。
• 2015 年 4 月 收購以色列初創(chuàng)公司 LinXLinX 創(chuàng)建于 2011 年，該公司的技術(shù)能夠通過將數(shù)字圖像分成三個部分的方式在照片中增加景深。
• 2015 年 5 月 收購德國 AR 公司 Metaio該公司主要開發(fā)智能手機(jī)平臺的增強(qiáng)現(xiàn)實(shí)應(yīng)用軟件，比如其曾經(jīng)開發(fā)一款讓家具視覺化呈現(xiàn)的工具。Metaio 曾經(jīng)的 CEO Thomas Alt 目前屬于蘋果戰(zhàn)略交易團(tuán)隊(duì)，決定應(yīng)該投資哪項(xiàng)技術(shù)。
• 2016 年 1 月 收購 Flyby Media。該公司主要利用空間感知技術(shù)，可以強(qiáng)化人們對其周圍環(huán)境的了解。

甚至還有消息稱，庫克曾拜訪過 Magic Leap 的辦公司，并表示對他們 AR 技術(shù)很感興趣。

帶有攝像頭的可穿戴信息系統(tǒng)” 專利描述圖

同時，蘋果也沒有放松對專利的申請，如下：

• 2015 年 5 月 申請柔性屏幕專利這是一種在固體發(fā)光像素周圍設(shè)計許多小孔的屏幕，可將屏幕變得又薄又柔軟，以幫助 AR 應(yīng)用。通過像素現(xiàn)實(shí)虛擬圖像，同時透過小孔查看屏幕另一邊的現(xiàn)實(shí)圖像。
• 2016 年 7 月 申請 AR 顯示使用到的類似光波導(dǎo)技術(shù)這項(xiàng)技術(shù)是讓圖像從離軸源文件中投射出來，通過透明物質(zhì) (護(hù)目鏡或薄片) 進(jìn)入視線。
• 9 月 申請 AR 映射系統(tǒng)這套 AR 映射系統(tǒng)能夠利用 iPhone 的硬件將增強(qiáng)現(xiàn)實(shí)功能疊加到直播視頻上。用戶通過手機(jī)應(yīng)用可以在一些現(xiàn)實(shí)場景中標(biāo)記數(shù)字信息，比如街道名稱、興趣點(diǎn)等等，并用攝像頭進(jìn)行掃描。
• 11 月 申請 AR 頭盔專利這項(xiàng)專利描述的是一種保留移動電子設(shè)備屏幕的頭盔式顯示屏儀器，頭盔式屏幕系統(tǒng)以及操作方案可以讓用戶 “配對” 或 “解除”。
• 2017 年 2 月 申請帶有攝像頭的可穿戴信息系統(tǒng)這項(xiàng)技術(shù)可能會用在一款頭戴顯示器中，而顯示器上搭載的攝像頭可以接收與顯示器相同視角的信息。該系統(tǒng)可下載有趣的內(nèi)容，并用 AR 展示出來。
• 3 月 申請專利名為 “利用景深加強(qiáng)人臉檢測”這項(xiàng)專利是通過計算機(jī)視覺系統(tǒng)，利用專門的硬件和軟件進(jìn)行人臉識別，尤其是已經(jīng)保存到數(shù)據(jù)庫中的人臉數(shù)據(jù)。

2016 年 11 月，蘋果被爆與 LG 聯(lián)合開發(fā) 3D 攝像頭模組，研究如何將自家的 3D 攝像頭技術(shù)應(yīng)用于 LG Innotek 生產(chǎn)的智能手機(jī)攝像頭模組。 從上述種種來看，我們可以確定，蘋果規(guī)劃了兩條 AR 產(chǎn)品路線，一是讓新迭代的 iPhone 具有 AR 功能，二是打造一款 AR 眼鏡。 AR 手機(jī)的難度在哪？ 先來說說， AR 手機(jī)。要打造這樣一款手機(jī)，到底有什么難度？ 此前，三維建模公司積木易撘CTO 鄒圣兵曾解釋三維建模掃描的成像原理： 兩臺工業(yè)相機(jī)和一個投影儀可組成最小的掃描儀單元。攝像機(jī)得到深度信息，投影儀能投射已知編碼影像，通過前方交會計算得出點(diǎn)云，每幅投影儀得到的點(diǎn)云之間實(shí)時匹配，再進(jìn)行全局優(yōu)化，實(shí)現(xiàn)表面三維點(diǎn)云重建，點(diǎn)云三角網(wǎng)格化，也就是得到了投影儀投影對象的三維模型。 “手機(jī)要搭載 AR 技術(shù)，不只要包含投影儀、攝像頭、還需要鏡子、手機(jī)?！?鄒圣兵進(jìn)一步解釋了手機(jī)實(shí)現(xiàn) AR 功能的原理。 傳統(tǒng)的 AR 設(shè)備通過手柄、眼球跟追、手勢識別等，實(shí)現(xiàn)與投影儀交互，讓投影儀投影已知彩色編碼，通過攝像機(jī)和鏡子拍攝的圖片，計算出深度信息，然后再將計算出的深度信息結(jié)合 slam 算法（建模只是點(diǎn)云信息，不進(jìn)行后續(xù)），與真實(shí)世界進(jìn)行融合、對齊。接著，在對齊的虛擬場景中進(jìn)行渲染，渲染出接近真實(shí)場景的效果，這就是 AR。 手機(jī)如果集成了投影儀、兩個攝像頭、一面鏡子。手機(jī)在用戶手中，操作投影儀所對的方向，投影已知彩色編碼圖像到前方對象上，產(chǎn)生畸變的彩色編碼圖像被兩個攝像頭拍攝，拍攝的兩張圖片在手機(jī)處理器進(jìn)行計算，得到前方對象的點(diǎn)云信息。鏡子能得到廣角圖像不像攝像頭有景深限制，鏡子得到的廣角圖像，范圍較大，不只是包含了投影儀的投影對象，也包含前方的場景圖片。 該圖片傳入手機(jī)處理器進(jìn)行計算，結(jié)合 slam 算法，計算出場景的輪廓等信息，再結(jié)合手機(jī)在場景中的相對位置和視野等信息，這樣就能實(shí)現(xiàn)掃描的點(diǎn)云信息與虛擬場景的融合，在虛擬場景中渲染，得出接近真實(shí)世界的效果。

Phab2 Pro 的 AR 效果演示

而當(dāng)前市場上真正推出的 AR 手機(jī)是 Phab2 Pro，它是由聯(lián)想和谷歌合作的產(chǎn)品，采用了谷歌 Project Tango 技術(shù)，內(nèi)置三顆攝像頭，包括一顆魚眼鏡頭和一顆紅外傳感器，可實(shí)現(xiàn)空間定位。 鄒圣兵表示， “Tango 手機(jī)中攝像機(jī)、兩個攝像頭、一面鏡子和對應(yīng)的處理器是一個整體，是由一個獨(dú)立廠家提供，沒有與手機(jī)主板真正集成，而且由于三維重建需要很強(qiáng)的處理器和較大內(nèi)存，這都不是獨(dú)立模塊能達(dá)到的。 如果蘋果要支持 AR，并且直接集成在主板，AR 處理與手機(jī)其他處理是一個處理器，就要觀察蘋果是否完成相關(guān)生態(tài)鏈的收購整合。目前來說，還沒見到樣機(jī)，不好評判?！? 由此可見，蘋果要成功做出一部 AR 手機(jī)，技術(shù)是一方面，各技術(shù)的集成也十分關(guān)鍵。不久前，蘋果宣布自己將獨(dú)立研發(fā) GPU，可能會將 CPU 和 GPU 更好結(jié)合，從而針對 AR、AI 提升移動設(shè)備計算能力。至于 iPhone 8 或是后續(xù)產(chǎn)品是否會有驚艷的表現(xiàn)，我們可以保持期待。 此外，AR 眼鏡方面最具代表性的便是微軟 HoloLens，以及 Meta。而今年一月有蔡司員工向國外科技博客作者確認(rèn)，蘋果正與蔡司合作研發(fā) AR 眼鏡。 綜上，不得不說，蘋果對 AR 的野心可不止一點(diǎn)點(diǎn)。當(dāng)然，我們也希望蘋果能讓 AR 走向更多的消費(fèi)者。 延伸閱讀： 有圖就可以買到！谷歌為剁手黨推出了這項(xiàng)黑科技 掌握搜索，就可以掌握互聯(lián)網(wǎng)的流量入口，當(dāng)Siri在移動互聯(lián)時代開始想辦法同谷歌一較高低時，谷歌這一搜索領(lǐng)域的巨頭怎能甘心？這不，沒低調(diào)多久的谷歌就專為剁手黨推出了一項(xiàng)黑科技。 來源：電腦報（id：CQCPCW） 谷歌為剁手黨打造的黑科技 在網(wǎng)絡(luò)上的一些時裝圖片中，用戶經(jīng)常會看到購物鏈接，表示可以直接購買圖片中的商品。據(jù)外媒最新消息，谷歌圖片搜索也推出了類似的功能，意味著海量的圖片搜索結(jié)果，將成為一個網(wǎng)絡(luò)購物的渠道。 目前用戶在搜索部分圖片時，谷歌將會給出圖片中商品的購物鏈接。比如用戶如果看到了一張明星照片，明星可能佩戴著一款太陽鏡，此時，谷歌將會識別出這幅太陽鏡，并在搜索界面的頂部，給出商品照片和購物鏈接。 谷歌并未在所有的圖片搜索服務(wù)中推出這一特色功能，用戶可以在移動網(wǎng)站搜索或是安卓搜索客戶端中使用這一功能。目前谷歌開始支持的商品類型，包括手袋、太陽鏡和鞋類。 圖片搜索技術(shù)的延伸 事實(shí)上，谷歌和百度一類搜索引擎本身一直就有圖片搜索功能，而過去圖片收藏和圖片共享網(wǎng)站Pinterest在美國也推出了類似功能，谷歌圖片搜索進(jìn)行了借鑒。 相比傳統(tǒng)文字搜索，直接搜索圖片的做法，往往能夠讓用戶獲得更準(zhǔn)確的內(nèi)容，搜索也更為便利?！蹲顝?qiáng)大腦》第一期嘉賓邀請了百度CEO李彥宏助陣。第一位選手“超級找茬王”，該選手可以在上萬個元素對比圖中尋找出不同之處。李彥宏說道：“這其實(shí)就是一種搜索，在上萬個圖片中找出其中一個不一樣，這也是百度的一種搜索技術(shù)。 第四位選手“千面師奶”，可以記憶不同人臉，無論打扮化妝都能精準(zhǔn)識別。李彥宏點(diǎn)評：“這種抽象的能力對于學(xué)電腦的來說是很難很難的，我們學(xué)電腦搞了幾十年的模式識別的研究，到現(xiàn)在其實(shí)全世界最厲害最厲害的人工智能，大概也只能達(dá)到兩三歲小孩的智力，所以，我對這么強(qiáng)的抽象模式識別的能力非常的佩服?！? 這都是圖片搜索非常有趣的應(yīng)用，不過谷歌在日常應(yīng)用的基礎(chǔ)上，增加了購物連接而已，商業(yè)化的同時也賦予用戶更多的想象力和應(yīng)用空間。 難點(diǎn)在于識別正確率 用過百度或者谷歌圖片搜索的用戶會發(fā)現(xiàn)，它們往往能為我們找到很多相似的圖片，卻經(jīng)常找不到準(zhǔn)確的圖片。谷歌想要完成這樣的搜索，首先需要建立足夠龐大的數(shù)據(jù)庫，與此同時，想要提升搜索的效率，還需要構(gòu)造完善的機(jī)器人學(xué)習(xí)機(jī)制。 完善的機(jī)器人視覺和學(xué)習(xí)機(jī)制，能夠不斷夯實(shí)搜索引擎應(yīng)用基礎(chǔ)，并使用谷歌的結(jié)構(gòu)化數(shù)據(jù)測試工具來驗(yàn)驗(yàn)證產(chǎn)品標(biāo)記格式是否正確。 這的確是個賺錢的生意 眾所周知，谷歌最重要的收入是搜索廣告，但在智能手機(jī)時代，消費(fèi)者使用網(wǎng)頁搜索的頻率大幅度降低，主要活動圍繞著APP來進(jìn)行，因此谷歌面臨著一個巨大的潛在危機(jī)——網(wǎng)頁和網(wǎng)站被APP所淘汰。 電子商務(wù)本身就是谷歌布局的空白，其主要業(yè)務(wù)就是通過各種商品廣告等方式，給外部購物網(wǎng)站那帶去流量。谷歌認(rèn)為將價格和其他購物相關(guān)信息增加到圖片搜索當(dāng)中是用戶的需求所在。畢竟當(dāng)某個用戶去專門搜索手包、鞋子或者某個 Fashion icon 的圖片時，大部分情況下是有購買相關(guān)產(chǎn)品需求的，那么何不再多進(jìn)一步將這些消費(fèi)者們需要的信息添加上去呢？ 當(dāng)然，一旦有這樣的引導(dǎo)和指向，恐怕又會引發(fā)一連串有關(guān)競價排名、比價方面的問題，恐怕會成為一把雙刃劍。 來源：雷鋒網(wǎng) 關(guān)注微信公眾號：VR陀螺（vrtuoluo）,定時推送，VR/AR行業(yè)干貨分享、爆料揭秘、互動精彩多。