文/VR陀螺 ZJ
過去幾年來,谷歌一直在努力打造一款體驗,這款體驗使用戶即使身處于幾個時區(qū)之外,也能感覺自己正與另一個人在一起。
就目前谷歌的業(yè)務(wù)范圍來說,一方面是該公司推出的與Zoom競爭的視頻會議應(yīng)用Google Meet。另一方面,是現(xiàn)已停止使用的VR平臺Daydream,該平臺配有頭顯和控制手柄。
但是,對于負責(zé)公司AR和VR工作的Clay Bavor而言,這個范圍內(nèi)的任何東西都無法滿足他的要求。他希望能推出如照片般逼真的體三維視頻會議,以使其在視覺、聽覺和感覺上都像有真人坐在對面一樣,且不需要頭顯。
為此,他的團隊建造了一個新設(shè)備,這款用于面對面會議的新原型機名為Project Starline。實際上,“視頻亭”一詞是描述Starline的最簡單方法:它看起來像是一個在餐廳中常見的大型卡座,只是技術(shù)上更加復(fù)雜。
Starline初體驗
我有機會在五月初進行了體驗。在與位于加利福尼亞州山景城谷歌園區(qū)外的Bavor進行初步交談之后,我被帶到這座幾乎空曠的大樓內(nèi),并被護送到一間私人辦公室中。那里有Starline的原型機,這個原型機的展示亭由木板和灰色織物裝飾包裹,一側(cè)有一個內(nèi)置長椅,另一側(cè)有一個65英寸的顯示屏。
圖源:Google
我被指示坐在顯示器對面。直到有產(chǎn)品經(jīng)理坐在我對面時,才有燈光,攝像頭,并且不需要太多操作。從一個非常特定的角度來看,他就像真的坐在我對面一樣。但實際上現(xiàn)在他正身處于大樓的另一層,并通過Starline進行了這場會面。
這是谷歌對未來視頻會議的想法,這是一個只有一小部分谷歌員工才能接觸到的愿景,而且顯然已經(jīng)得到了首席執(zhí)行官Sundar Pichai的認可。認為Starline一定是在疫情大流行期間開發(fā)出來的是個無可厚非的想法,因為當(dāng)時人們正在通過Meet和Zoom進行辦公。但Bavor表示,Starline并不是什么"靈光一現(xiàn)"的產(chǎn)物。事實上,該項目已經(jīng)醞釀了五年多。
"關(guān)于VR和AR,一直讓我感到興奮的是,這些技術(shù)可以把你帶到其他地方,它們可以讓你在其他地方有存在感,"Bavor說道。"但即使如此,這些技術(shù)也似乎沒有辦法把世界上最重要的東西,即關(guān)心你的人,帶到你身邊。"
該公司在其年度I/O大會上讓公眾看到了Starline項目。但是Starline仍然只是一個概念,在幾年內(nèi)都不太可能讓Google Meet變得生動起來。
光場顯示器與實時渲染
Starline項目的首席產(chǎn)品經(jīng)理Andrew Nartker一直在用一個蘋果做示例。其以蘋果為例展示了物體在Starline項目中的呈現(xiàn)方式,而且這也是一種追蹤眼睛的方式。
"我可以給你看這個來自Whole Foods的蘋果,我可以準確地看到你在看什么,"Nartker說道。他在屏幕中顯示出的形象很震撼,有著真人大小,看起來像是直接坐在我面前,并且有體積、深度和陰影。還有那個蘋果,看起來Nartker就像是和蘋果一起被困在了一個透明盒子中一樣。
圖源:Google
Nartker從另一個Starline項目展示亭上參與了這場會面。我所能看到的畫面非常出色,視覺效果還得到了空間音頻的補充。我所看到的實際上是一個65英寸的光場顯示器。
Project Starline展示亭配備了十多個不同的深度傳感器和攝像頭(當(dāng)我問及設(shè)備的具體細節(jié)時,谷歌對此諱莫如深)。這些傳感器能夠捕捉如照片般真實的三維圖像,然后由系統(tǒng)壓縮并將數(shù)據(jù)傳輸?shù)揭曨l對話兩端的光場顯示器上,并且看起來似乎沒有什么延遲。谷歌會應(yīng)用一些自己的特殊效果,以調(diào)整照明和陰影。其呈現(xiàn)出的效果是在視頻通話中展現(xiàn)出超真實的人物畫面。
體三維視頻,有時被稱為全息視頻,或僅僅是3D視頻,通常是在大型、多鏡頭的工作室中進行拍攝的,如微軟的MR捕捉工作室或英特爾那個已經(jīng)關(guān)閉的體三維捕捉空間。
從目前來看,一方面,Starline項目可能不會很快在你的臨時家庭辦公室中擁有一席之地。谷歌也沒有透露建造一個Starline展示亭需要多少錢,但我們有理由猜測將會花費“很多”。另一方面,Starline項目是對更大型的體三維捕捉工作室的提煉。更值得注意的是,Starline項目呈現(xiàn)出的視頻并不是在事后渲染的,這一切都在現(xiàn)場實時發(fā)生的。
所有的數(shù)據(jù)都是通過WebRTC傳輸?shù)?,WebRTC是為Google Meet提供動力的開源基礎(chǔ)設(shè)施。谷歌聲稱其獨特之處在于它所開發(fā)的壓縮技術(shù),使其能夠雙向同步傳輸這種3D視頻。
圖源:Google
雖然很難想象這種技術(shù)可以通過普通消費者家中低劣的家庭Wi-Fi連接無縫工作(谷歌確實證實了我所坐的Starline展示亭是與大樓的網(wǎng)絡(luò)連接在一起的),但Starline項目的工程師堅持認為,這種技術(shù)可以使用標準速度的辦公網(wǎng)絡(luò),不需要光纖。
我在Starline項目中分別會見了三名谷歌員工(都是男性),每次我在座位上晃動時,那種超真實的感覺就會消失。只要向旁邊移動幾英寸,體積的幻覺就會消失。突然間,你會看到視頻聊天伙伴變成了二維版本,這種感覺類似于你在大屏幕電視上觀看體育賽事時,在正確的位置看起來效果不錯,但當(dāng)你移動的時候效果就會發(fā)生改變。
在視頻對話期間,還會有一些隨機的人工制品在屏幕上飄動,這些破碎的碎片偶爾會提醒我,我面前的人并不是真的在那里。當(dāng)Nartker開始把一個網(wǎng)頁投到光場顯示器上,作為兩個人在Starline中如何合作的例子講解時,我們都只能盯著對方右肩上一個不怎么能互動的網(wǎng)頁。雖然Starline項目令人印象深刻,但仍然還有很多工作要做。對于還要多久才能看到該項目面市這個問題,谷歌的工作人員似乎并不愿意回答。
由技術(shù)營造的存在感
谷歌表示,大約只有一百名員工使用過Starline項目,因為這項技術(shù)一直被藏在山景城、西雅圖和紐約的秘密辦公室里。Bavor本人最近在西雅圖和紐約與同事開會時大部分時間都在使用它,他估計在Starline的展示亭上花了大約50個小時。但他發(fā)誓,他在Starline中的互動過程為他的大腦留下了更深刻的印記,他對細節(jié)有了更好的回憶,從會議中走出來時,會感覺到他確實與對方見過面。
圖源:Google
"我知道坐在我對面的人在會議期間沒有看他的手機,這很好,"Bavor說道。"但瘋狂的是,我在第二天早上醒來時,會有這樣的記憶:'哦,我昨天看到了Steve。’而不是'我昨天和史蒂夫進行了視頻通話'。Starline為我們的記憶帶來了一些不同的影響。"
Bavor的體驗感有些主觀,當(dāng)然這只是一個樣本?,F(xiàn)在的辦公室工作人員在過去14個月里都在通過屏幕參加會議。根據(jù)微軟的研究,我們在視頻會議中更容易分心,這在一定程度上是一種應(yīng)對機制,以保護自己免受過多視頻會議的精神壓力。
在這種情況下,谷歌的 Starline項目似乎設(shè)計得特別好,它是無障礙技術(shù)(Google Meet)、Nerd技術(shù)(計算機視覺、壓縮算法!)和一個復(fù)雜的、不可移動的迷你工作室的綜合體,所有這一切都是為了讓人們能進行更多的視頻會議。
但當(dāng)然,技術(shù)專家們所追求的是像照片那樣的真實感,他們的操作前提是,通過屏幕連接真的是唯一的選擇。但后來,也許,我們能試試VR頭顯?
谷歌已經(jīng)嘗試過制作VR頭顯,但人們并沒有真正使用它們。它也做過AR眼鏡,誰能忘記谷歌眼鏡?如果你碰巧寫了一篇文章,暗示谷歌眼鏡已經(jīng)不復(fù)存在了,該公司的公關(guān)團隊會迅速提醒你,它仍然在銷售一種叫做Glass Enterprise Edition 2的產(chǎn)品。
人們不得不懷疑Bavor(他經(jīng)常戴著普通的、不智能的眼鏡)最近是否對平視顯示器不那么感興趣了,因為在這個時候,似乎所有其他消費科技公司都在制造能戴在臉上的計算機。
Bavor說他仍然認為VR "能夠?qū)⒂脩魩У絼e的地方的能力非常強大",而且AR、VR和Starline項目之間存在著一條互通的通道。但是,他也承認,"我認為從AR和VR吸取到的經(jīng)驗之一是,讓人們能夠像你一樣直接坐下來,且不需要佩戴任何東西是很重要的。我認為這說明了舒適、輕便和輕松的重要性。所以這就是我對它的一種思考。"
目前,谷歌將嘗試繼續(xù)完善Starline項目,同時著手于將其小型化。如果Starline項目能夠開始銷售,它們可能會被賣給企業(yè)。Bavor說道,谷歌將在今年晚些時候與少數(shù)早期客戶進行技術(shù)試驗,包括企業(yè)云業(yè)務(wù)、遠程醫(yī)療應(yīng)用或媒體公司,不過他拒絕透露這些早期測試者的名字。
為Starline項目開發(fā)的一些光學(xué)技術(shù)可以更快部署到日常技術(shù)中。例如照明和陰影或空間音頻可以應(yīng)用于我們已經(jīng)在使用的視頻會議應(yīng)用程序。在此之前, Starline項目的展示亭將主要由谷歌員工使用,這些人將進入辦公室,他們會驚嘆于該技術(shù)呈現(xiàn)出的真實性,并暫時忽略這種真實性和現(xiàn)實之間的差距。
原文鏈接:
https://www.wired.com/story/google-project-starline/
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)
版權(quán)申明:本文為VR陀螺原創(chuàng),任何第三方未經(jīng)授權(quán)不得轉(zhuǎn)載。如需轉(zhuǎn)載請聯(lián)系微信:vrtuoluo233 申請授權(quán),并在轉(zhuǎn)載時保留轉(zhuǎn)載來源、作者以及原文鏈接信息,不得擅自更改內(nèi)容,違規(guī)轉(zhuǎn)載法律必究。文中有圖片、視頻素材來自互聯(lián)網(wǎng)或無法核實出處,如涉及版權(quán)問題,請聯(lián)系本網(wǎng)站協(xié)商處理。
元宇宙數(shù)字產(chǎn)業(yè)服務(wù)平臺
下載「陀螺科技」APP,獲取前沿深度元宇宙訊息