王啟文Leon是 Google AR 團隊的軟件工程總監(jiān)，主管ARCore 的機器感知算法項目，如運動跟蹤和深度感知等技術的開發(fā)。加入 Google 之前，他在 Microsoft, Facebook 和 Pinterest 先后擔任過工程經理。Leon擁有麻省理工學院計算機科學的學士和碩士學位。

首先，王啟文強調了AR作為一種視覺沉浸式媒介，能夠吸引人們的注意力，是一種體驗信息的新方式，并最終推動用戶的行動。而谷歌發(fā)布于2018年的ARCore是AR開發(fā)者平臺，提供了簡單而強大的工具，為Android和iOS用戶創(chuàng)造有效的AR體驗。目前已被應用在7億臺設備和成千上萬款app上，并且已獲得一些更新。

其中，王啟文介紹了包括美圖、滴滴、有道少兒詞典的中國開發(fā)者如何使用ARCore提高產品的性能和體驗。

美圖公司利用ARCore的增強面孔API（Augmented Faces API）構建了100多個自拍濾鏡，就是現(xiàn)在我們在BeautyPlus上可以體驗到的AR特效，用戶可以拍攝照片和視頻與朋友分享。

增強面孔API（Augmented Faces API）從2D圖像中生成3D網格，可追蹤嘴部動作、眨眼、點頭和一些復雜的細節(jié)。

滴滴的ARCore導航功能幫助乘客在火車站、商場和機場等大型公共區(qū)域找到司機。滴滴地圖中加入了AR路標，15%的用戶使用AR來引導他們找到訂單司機，80%的用戶給出好評。

有道少兒詞典應用使用AR來幫助孩子們以一種有趣和吸引人的方式學習新單詞。該應用將“三角龍Triceratops ”等單詞與其3D模型在AR中配對，父母可以把AR畫面錄制或拍照，方便日后成為孩子們可參考的學習材料。

另外，ARCore的新增功能如下：

迅速放置API（Instant Placement API）

一般來說，用戶在空間中放置過ar對象時，需要先用手機掃描周圍的環(huán)境，完成3D表面檢測。但這個過程將耗費一些時間和精力。實際上，在大多數(shù)情況下，我們不需要知道AR對象確切的3D位置也可以正確地呈現(xiàn)它。

借助迅速放置API和幾行代碼，開發(fā)人員可讓用戶將AR對象錨定到2D圖像中，而不需要確切知道AR對象具體的3D位置。如果需要更精確的比例，可以針對3D位置進行三角測量。

景深應用API（Depth API）

景深API可以從單個RGB相機生成地圖。原理是通過不同角度拍攝多張圖像，并在移動手機時進行比較，以估計到每個像素的距離。盡管只有一個RGB相機，添加了景深傳感器（如飛行時間傳感器），會讓景深地圖效果更好。

景深可以通過多種方式增強AR真實感，“遮擋”是其中一種景深應用，即隱藏數(shù)字物體在現(xiàn)實世界中被遮擋的部分，從而使它們看上去像是在現(xiàn)實場景中真實存在。

另一種是“表面交互”，即在設備中的世界里，添加3D層面的計算，可以實現(xiàn)與現(xiàn)實物品表面的交互，比如創(chuàng)意AR對象，并在其表面設計反彈和飛濺的動作。此功能可以用于開發(fā)新的交互式游戲機制，使玩家能夠躲在真實物體的后面。Snapchat的Dancing Hotdog和Undersea World Lens效果都使用了景深。

Persistent Cloud Anchors API

Cloud Anchors API可用于與多個用戶共享ar對象。在相同物理空間中的不同位置同時查看這些對象并與之交互，AR內容也因此可使用更長時間。

這相當于一個“保存按鈕”，人們可以基于相同的AR體驗進行創(chuàng)作并進行反復修改。比如，Sybo和iDreamSky的Mark應用采用了該功能，人們可以在現(xiàn)實世界中與朋友一起創(chuàng)建、發(fā)現(xiàn)和共享ar藝術。