LBS+AR、解謎、卡牌、創(chuàng)意繪畫……這幾類幾乎囊括了現(xiàn)有的AR游戲類型，而玩法中大多只用到了基礎(chǔ)的AR疊加和平面識別。

隨著AR技術(shù)的發(fā)展，如今基于智能手機(jī)的AR早已不是當(dāng)年單純的疊加效果。如華為HMS Core AR Engine如今已經(jīng)升級到3.0版本，除了與環(huán)境有更深的交互之外，甚至還能進(jìn)行全身動作捕捉。

AR新技術(shù)與傳統(tǒng)手游結(jié)合將碰撞出哪些創(chuàng)新玩法，或許《迷你世界》能夠帶來啟發(fā)。

提到AR游戲，或許很多人都會聯(lián)想到風(fēng)靡全球的《Pokemon GO》（精靈寶可夢GO），這是一款風(fēng)靡全球的AR游戲，與真實(shí)世界互動，在街道、公園、河邊、山上抓虛擬小精靈，新穎的玩法結(jié)合任天堂的IP帶來了巨大的市場潛力，至今這款游戲總收入已經(jīng)達(dá)到40億美元。

從AR實(shí)現(xiàn)的效果來看，《Pokemon GO》最初推出時實(shí)際上只是將小精靈簡單的疊加在現(xiàn)實(shí)世界上，加上GPS定位，如讓水屬性的小精靈出現(xiàn)在湖邊來實(shí)現(xiàn)更具特色的玩法。雖然AR層面的效果簡單，但加上IP自身的影響力，以及收集養(yǎng)成、競技對戰(zhàn)等玩法，讓這款游戲成為了AR游戲中的標(biāo)桿。

從最初AR SDK推出到現(xiàn)在，AR技術(shù)底層也從簡單的疊加，進(jìn)化到能夠與現(xiàn)實(shí)世界有更深的交互。如近日華為發(fā)布的HMS Core AR  Engine 3.0版本，從功能來看，其不僅在空間算法上支持厘米級精度，實(shí)現(xiàn)環(huán)境語義理解、環(huán)境光照/紋理、物體跟蹤，還能實(shí)現(xiàn)人臉光照、唇語識別，手部關(guān)節(jié)識別、人體骨骼識別等功能。

通過深度相機(jī)拍攝后對環(huán)境建模，結(jié)合算法與AI，不僅能夠識別場景物體，還能感知光照環(huán)境，如虛擬物體會被真實(shí)光線所影響，包括虛擬物體的影子角度、光照效果，甚至能將真實(shí)物體鏡面反射到虛擬物體中。

面部識別功能能夠提供4千多個頂點(diǎn)、7千多個三角形面片的Mesh，精細(xì)勾勒臉部輪廓，達(dá)到更精細(xì)的面部表情效果。

而全身動捕，則是通過識別和跟蹤23個身體骨骼點(diǎn)的2D位置（或15個骨骼點(diǎn)的3D位置），來實(shí)時判斷人的肢體動作和姿勢，并且支持單人和雙人。

得益于AR底層的進(jìn)步，現(xiàn)在的AR所實(shí)現(xiàn)的效果不僅能夠根據(jù)環(huán)境變化而變化，還能與環(huán)境進(jìn)行深度融合，同時加上面部捕捉、手勢識別、全身動作捕捉，游戲應(yīng)用在設(shè)計和交互體驗(yàn)上都有了非常大的拓展和提升。

而如今也有越來越多的硬件支持高級AR體驗(yàn)，如華為 HMS Core AR Engine 2.0安裝手機(jī)量達(dá)到5億次，目前已支持62款機(jī)型，包括Mate、P系列期間機(jī)型，Nova系列、榮耀系列以及平板電腦等。開發(fā)者對于AR的熱情持續(xù)升溫，據(jù)稱目前每個月有1000個左右開發(fā)者接入。截止到8月，華為AR上架應(yīng)用數(shù)量達(dá)到380款，開發(fā)者注冊用戶達(dá)到1萬。

除了上文中提到的LBS+AR玩法之外，在AR技術(shù)底層愈發(fā)先進(jìn)的現(xiàn)在，游戲如何結(jié)合這些功能進(jìn)行革新？《迷你世界》提供了一個非常有意思的思路。

《迷你世界》是迷你玩科技推出的一款休閑3D沙盒游戲，玩家可以在其中自有建造、創(chuàng)作并分享給其他玩家，所以與其說這是一款游戲，該團(tuán)隊更傾向于將它定義為一個創(chuàng)作平臺。

此次VR陀螺采訪到迷你玩科技聯(lián)合創(chuàng)始人高南、古振興，對這款游戲加入AR玩法以及對AR的看法進(jìn)行了深度了解。

1、虛實(shí)結(jié)合：新內(nèi)容領(lǐng)域的潛力

“AR這次的結(jié)合，里面我們關(guān)于虛實(shí)結(jié)合工具一個重要的點(diǎn)，玩家可以通過手機(jī)去掃描一個動作，他就可以在游戲里面去完成，把這個動作植入到角色中，然后再植入到他想要的游戲場景中。同時，我們根據(jù)這項技術(shù)還研發(fā)了更細(xì)微參數(shù)的調(diào)整的一個編輯模式，以及制錄一體化，完善了他通過AR技術(shù)導(dǎo)入這個動作之后在游戲中的一個內(nèi)容創(chuàng)作的編輯能力，所以也是希望通過AR的技術(shù)，讓這些用戶可以在游戲里面更好的去完善他們的一些內(nèi)容創(chuàng)作。”

VR陀螺體驗(yàn)了這款游戲，在游戲中的迷你星工場菜單中，選擇“星·舞動”即可打開AR功能。

拍攝過程中需要保持一定距離，拍攝全身范圍才能捕捉到整個身體的動作。VR陀螺使用華為Mate20，后置3個1600萬像素攝像頭，實(shí)際動捕算法僅使用其中一個普通攝像頭。在沒有ToF等深度相機(jī)的前提下，仍然可以通過算法實(shí)現(xiàn)實(shí)時且精準(zhǔn)的人體骨骼識別。

最后拍攝下來的舞蹈動畫通過游戲中的自定義編輯系統(tǒng)，對需要完善的部分進(jìn)行編輯調(diào)整。據(jù)了解，在動作捕捉過程中，一些蹲下、轉(zhuǎn)身、彎腰等動作，普通的AR捕捉實(shí)際上很難做到非常精細(xì)，甚至?xí)G失，導(dǎo)致動作不真實(shí)或者跳躍。為了解決這些問題，所以迷你玩基于動作捕捉底層加入了動作預(yù)判算法，根據(jù)用戶的運(yùn)行軌跡算出一些方程式來預(yù)測下一個動作，如此一來當(dāng)用戶轉(zhuǎn)身、蹲下的時候，這些動作可以很順暢地表現(xiàn)出來。

通過簡單的方式用戶就可以做出很復(fù)雜的一套三維游戲動作，并且可以將這些動作應(yīng)用到很多游戲場景里，實(shí)現(xiàn)游戲中的角色、動作、場景全自由化，所有規(guī)則都可以自己來創(chuàng)作、設(shè)定。

如《迷你世界》中的沙盒動畫，UGC作者通過游戲中的場景搭建能力和角色形象編輯一些小劇場故事。許多在之前游戲中無法表達(dá)的內(nèi)容，通過AR技術(shù)，能夠?qū)⒔巧⑿蜗?、表演甚至肢體語言動作更生動地表現(xiàn)出來。

《迷你世界》定位創(chuàng)作平臺，據(jù)了解現(xiàn)在平臺上已有七千萬沙盒的虛擬作品，包括闖關(guān)、跑酷游戲類作品；純建筑觀賞性作品等，今年暑假《迷你世界》的月活達(dá)到1億，其中60%-70%為青少年用戶，用戶忠誠度和粘性、作品創(chuàng)意度極高，樂于探索新玩法。

2、虛擬偶像+IP“共創(chuàng)”

虛擬偶像雖然早有初音未來、洛天依這些強(qiáng)IP角色，然而真正產(chǎn)業(yè)開始規(guī)?；l(fā)展是從2018年開始，造就了愛醬、輝月夜、時空乃等知名IP，如今更是百花齊放應(yīng)用在直播、電商、廣告營銷、演唱會等領(lǐng)域，成為一大重要的娛樂形態(tài)。

虛擬主播之所以能如此火爆，除了二次元產(chǎn)業(yè)的蓬勃發(fā)展之外，動捕技術(shù)的低門檻化也是重要的推動力。早期的初音未來以全息投影、動畫形態(tài)出現(xiàn)，難以與現(xiàn)場觀眾實(shí)時互動。而驅(qū)動虛擬偶像與觀眾實(shí)時互動的技術(shù)——動作捕捉，早在上世紀(jì)八九十年代早已應(yīng)用于電影行業(yè)，技術(shù)非常成熟。但不論是Vicon還是Motion Analysis都是極其專業(yè)的光學(xué)動捕設(shè)備，動輒數(shù)百上千萬的價格，且不論普通用戶，一般的小公司都難以承擔(dān)。

如今一套全身動捕設(shè)備價格低至千元級，在不采用動捕外設(shè)的情況下，光憑計算機(jī)視覺算法也能做到手勢、面部、肢體捕捉，幾乎實(shí)現(xiàn)了零門檻。通過手機(jī)攝像頭就能讓驅(qū)動虛擬角色動起來。

在虛擬偶像上，迷你玩基于《迷你世界》游戲中的角色I(xiàn)P推出了“花小樓”虛擬偶像，外形設(shè)計上融合了沙盒游戲的特色，小方臉，三頭身，小巧可愛，相當(dāng)有辨識度。根據(jù)網(wǎng)絡(luò)數(shù)據(jù)，花小樓目前全網(wǎng)粉絲數(shù)已超過1000萬。

如果說之前的花小樓是官方專用的虛擬偶像，那么游戲中加入AR骨骼動捕之后，花小樓以及游戲中的其他角色，都能變成“IP共創(chuàng)”的虛擬偶像，成為玩家二次創(chuàng)作UGC內(nèi)容的素材，IP價值將進(jìn)一步擴(kuò)散和放大。

“以后我們的IP，整個《迷你世界》IP是另外發(fā)展的一條線，IP里面涉及到另外一個點(diǎn)，叫IP共創(chuàng)，我們后面會有一個共創(chuàng)平臺給到更多的IP愛好者和參與者，參與到我們的共創(chuàng)平臺里面一起來共創(chuàng)內(nèi)容。”

《迷你世界》第一次在AR上的嘗試，為行業(yè)帶來了新的啟發(fā)。而隨著底層技術(shù)進(jìn)化，移動游戲還將在AR方向上衍生出更多創(chuàng)新玩法和可能性，如果未來計算終端從手機(jī)過渡到AR眼鏡，那么未來理解世界的方式，人與世界、人與人之間的交互和溝通，未來的娛樂方式也將迎來大變革。

我們相信，技術(shù)不會倒退，每一次嘗試都是有價值的。