日?qǐng)?bào)：Oculus曝光下一代Quest；微軟推在線會(huì)議虛擬機(jī)器人系統(tǒng)VROOM，可結(jié)合AR/VR協(xié)同辦公
發(fā)布時(shí)間：2020-05-07 11:15 | 標(biāo)簽：
VR AR Oculus Quest VROOM
微信掃一掃：分享
微信里點(diǎn)“發(fā)現(xiàn)”，掃一下
二維碼便可將本文分享至朋友圈
看日?qǐng)?bào)是個(gè)好習(xí)慣！
微軟推在線會(huì)議虛擬機(jī)器人系統(tǒng)VROOM，可結(jié)合AR/VR協(xié)同辦公
Microsoft Research成員今天推出了用于在線會(huì)議的虛擬機(jī)器人系統(tǒng)（VROOM），它是一種將AR和VR技術(shù)結(jié)合在一起，并通過(guò)遠(yuǎn)程呈現(xiàn)機(jī)器人將真人大小的化身帶入工作場(chǎng)所的方法。VROOM的開發(fā)者在最近發(fā)布的一篇論文中詳細(xì)介紹了該系統(tǒng)，并表示這將使在VR中進(jìn)行遠(yuǎn)程工作的人和在辦公室工作并戴著HoloLens 頭顯的人感覺(jué)到同處一室。
當(dāng)Windows Mixed Reality頭顯跟蹤遠(yuǎn)程工作人員的姿勢(shì)和頭部運(yùn)動(dòng)時(shí)，他們可以通過(guò)機(jī)器人對(duì)周圍環(huán)境和運(yùn)動(dòng)進(jìn)行360度查看。Unity應(yīng)用程序用于根據(jù)遠(yuǎn)程工作人員的運(yùn)動(dòng)為佩戴HoloLens的人設(shè)置虛擬化身。
用戶的手勢(shì)和手臂動(dòng)作由控制器記錄，兩個(gè)參與者可以看到這些動(dòng)作。該系統(tǒng)增加了人們說(shuō)話時(shí)的嘴巴動(dòng)作，以及眨眼和閑置的動(dòng)作，使虛擬形象看起來(lái)更逼真。
VROOM還可以將2D圖像轉(zhuǎn)換為3D頭像，以將遠(yuǎn)程工作人員的臉部放在虛擬化身的頭部。VROOM系統(tǒng)還為VR用戶提供了第一人稱視角，因此遠(yuǎn)程工作者可以看到他們的手部動(dòng)作和手勢(shì)，以及使用HoloLens頭顯的人。當(dāng)遠(yuǎn)程工作者指示機(jī)器人移動(dòng)時(shí)，可以看到虛擬化身行走。
VROOM由西蒙·弗雷澤大學(xué)博士候選人和Microsoft研究實(shí)習(xí)生Brennan Jones、Microsoft研究工程師Yaying Zhang、Microsoft研究社交通信技術(shù)高級(jí)研究員Sean Rintel和Microsoft研究人員Priscilla Wong開發(fā)而成。
“盡管我們使用了帶屏幕的遠(yuǎn)程呈現(xiàn)機(jī)器人，以便可以在標(biāo)準(zhǔn)機(jī)器人遠(yuǎn)程呈現(xiàn)和VROOM之間進(jìn)行比較，但在所有本地用戶都戴著頭顯的空間中并不需要屏幕。因此，在將來(lái)的迭代中可以使用任何可驅(qū)動(dòng)并安裝了360度攝像機(jī)的機(jī)器人，”研究人員在論文中說(shuō)道。
研究人員期望像VROOM這樣的技術(shù)能夠適用于經(jīng)常使用白板或設(shè)計(jì)會(huì)議的行業(yè)，遠(yuǎn)程呈現(xiàn)機(jī)器人的其他有據(jù)證明的用途包括博物館中的應(yīng)用、出席遠(yuǎn)程學(xué)術(shù)會(huì)議和遠(yuǎn)距離關(guān)系。
VROOM僅演示了一對(duì)一的交互，其未來(lái)的工作可能會(huì)探索多人應(yīng)用程序，在共享的混合現(xiàn)實(shí)工作區(qū)中進(jìn)行實(shí)驗(yàn)，或者與價(jià)格較低的移動(dòng)機(jī)器人一起工作。
其他最新的VR工作場(chǎng)所應(yīng)用程序包括上個(gè)月引入了VR Zoom會(huì)議的Spaces應(yīng)用程序，上周HTC也推出了適用于虛擬現(xiàn)實(shí)的會(huì)議和協(xié)作Vive Sync應(yīng)用程序。
索尼研究人員推新VR控制手柄原型：具有手動(dòng)追蹤功能，采用關(guān)節(jié)式設(shè)計(jì)
索尼互動(dòng)娛樂(lè)（SIE）的研究人員最近推出了一款運(yùn)動(dòng)控制器原型，該控制器展示了使用機(jī)器學(xué)習(xí)和電容傳感器進(jìn)行全手跟蹤的實(shí)驗(yàn)技術(shù)。
像Leap Motion這樣的基于視覺(jué)的手部跟蹤系統(tǒng)非常適合在不使用運(yùn)動(dòng)控制器之類的物體時(shí)追蹤手部，但在使用控制器通常會(huì)遮擋手指的移動(dòng)。
為了讓VR運(yùn)動(dòng)控制器具有更好的手感，SIE研究人員Kazuyuki Arimatsu和Hideki Mori著手構(gòu)建了一個(gè)原型控制器，該控制器集成了許多如Valve Index控制手柄那樣的電容式接近傳感器。
原型包含62個(gè)電極，這些電極記錄了許多不同的手的大小和姿勢(shì)的訓(xùn)練數(shù)據(jù)集。與Index控制器一樣，Sony的原型采用了帶有腕帶的開放式手掌設(shè)計(jì)。
論文指出：“我們引入了2.5D表示法，將卷積神經(jīng)網(wǎng)絡(luò)方法應(yīng)用于曲面的電容圖像，并基于計(jì)算機(jī)視覺(jué)領(lǐng)域的最新成果對(duì)兩種類型的網(wǎng)絡(luò)架構(gòu)進(jìn)行了評(píng)估，我們還使用該原型實(shí)現(xiàn)了實(shí)時(shí)交互應(yīng)用程序，并演示了在VR應(yīng)用程序中使用手指進(jìn)行直觀交互的可能性。”
但是Arimatsu和Mori也承認(rèn)，他們的設(shè)計(jì)目前存在一些缺陷，即缺乏對(duì)所有不同大小手部的支持。
“如果我們將該方案交付給全球用戶，這可能會(huì)造成問(wèn)題。由于我們需要光學(xué)跟蹤系統(tǒng)來(lái)記錄訓(xùn)練數(shù)據(jù)集，因此無(wú)法使用我們當(dāng)前的訓(xùn)練方法實(shí)際根據(jù)用戶的使用情況微調(diào)訓(xùn)練。為了更好地適應(yīng)各種手型，需要研究一種用于增強(qiáng)或合成電容圖像的方法。”
當(dāng)前的算法無(wú)法估算用戶手部的形狀（例如手指的粗細(xì)），這會(huì)在執(zhí)行諸如捏等動(dòng)作之類的操作時(shí)在實(shí)際手部姿勢(shì)和虛擬手部姿勢(shì)之間造成差距。用戶當(dāng)然可以在拾取較小的虛擬物品時(shí)進(jìn)行自我調(diào)整，盡管對(duì)于Knuckles以及原始的Oculus Touch控制器來(lái)說(shuō)，這確實(shí)是正確的。Oculus Touch控制器是首個(gè)具有相對(duì)較小的電容傳感器陣列的主流VR控制器。
無(wú)論是通過(guò)Sony內(nèi)置的PC解決方案還是打算與PS5配合使用控制器，Sony都將繼續(xù)朝著商業(yè)化的方向發(fā)展。我們?nèi)栽谄料⒌却乱淮鶳SVR的發(fā)布，希望Sony至少能夠淘汰老化的PS Move和PS Camera光學(xué)組合。
Oculus曝光下一代Quest：體積更小刷新更高，將于2021年推出
據(jù)外媒報(bào)道，Oculus正在研發(fā)第二代Quest，相比現(xiàn)在的版本，下一代將擁有較小的外形尺寸，更快的刷新率和新的控制手柄。
彭博社的報(bào)道援引匿名人士的話說(shuō)，Oculus第二代的目標(biāo)似乎不是Quest 2，并且Oculus正在測(cè)試Quest的多個(gè)新版本，計(jì)劃在2020年末推出這款頭顯，但是由于新冠病毒影響，頭顯面世時(shí)間會(huì)延遲到2021年。
消息人士告訴彭博社，Quest新一代版本比現(xiàn)有Quest體積小10％至15％，而且重量更輕。Facebook通過(guò)去除Quest的面料裝飾并重新設(shè)計(jì)頭帶來(lái)減輕一些重量。Oculus新版本之前已經(jīng)展示了原型頭顯，其外形尺寸有了顯著改善，但是該技術(shù)很可能不會(huì)在一段時(shí)間內(nèi)離開實(shí)驗(yàn)室。
此外，據(jù)說(shuō)下一代Quest的刷新率至少為90Hz，可能高達(dá)120Hz，高于大部分頭顯當(dāng)前的72Hz。更快的刷新速度意味著頭顯中的動(dòng)作更平穩(wěn)，更舒適，但是可能需要更高的性能。Oculus此前曾表示，目前Quest的顯示器在技術(shù)上能夠達(dá)到90Hz，但如果他們想在事后改變這一現(xiàn)狀，則公司將不得不向監(jiān)管機(jī)構(gòu)為新頭顯重新認(rèn)證，這是他們不愿做的。鑒于據(jù)說(shuō)Quest繼任者至少有一些迭代使用90Hz顯示屏，因此新耳機(jī)可能仍會(huì)使用與當(dāng)前相同的顯示屏。而且如此高的刷新率將需要從Quest當(dāng)前的Qualcomm 835處理器升級(jí)到更強(qiáng)大的處理器，除非Oculus選擇執(zhí)行內(nèi)插60 FPS到120Hz刷新率之類的操作（類似于PSVR）。
消息人士還告訴彭博社，Oculus正在為頭顯重新設(shè)計(jì)的控制器，以解決在劇烈使用過(guò)程中電池蓋滑落的問(wèn)題。據(jù)報(bào)道，該控制器將與當(dāng)前的Quest之后版本兼容（因此也可能與Rift S兼容）。據(jù)稱，正在開發(fā)的某些Quest二代保留了與當(dāng)前頭顯類似的IPD模塊。消息人士還指出，新的Quest型號(hào)將繼續(xù)支持Oculus Link，從而使頭顯能夠與PC捆綁在一起，體驗(yàn)高端VR游戲。
索尼新專利曝光新頭顯面部追蹤功能
索尼一項(xiàng)美國(guó)專利透露了該公司對(duì)VR中面部追蹤的研究，這是未來(lái)多人游戲和VR社交的一項(xiàng)至關(guān)重要的技術(shù)。
該專利的標(biāo)題為“在虛擬現(xiàn)實(shí)環(huán)境中VR用戶的面部追蹤功能集成”，該專利是在頭顯底部或鼻隙中使用一個(gè)或多個(gè)攝像頭來(lái)實(shí)時(shí)捕獲用戶嘴巴和面部表情的情況。追蹤的數(shù)據(jù)將顯示在虛擬形象上，并在多人游戲中在線顯示給其他用戶。
與以前的Sony專利一樣，該頭顯還具有眼動(dòng)追蹤功能。該專利還解決了攝像頭無(wú)法完全掃描面部的問(wèn)題，通過(guò)一種彎曲傳感器（Flex Sensor）壓在用戶的面部上來(lái)描繪用戶面部細(xì)節(jié)，同時(shí)還運(yùn)用了一種感測(cè)鼻翼精確位置的方法，使這部分細(xì)節(jié)掃描獨(dú)立于整個(gè)面部。有消息稱，F(xiàn)acebook早前也展示過(guò)類似技術(shù)的雛型。
目前沒(méi)有消息稱索尼的這項(xiàng)技術(shù)將運(yùn)用在PlayStation VR 2中，或是索尼即將推出的PlayStation 5頭顯上。
第一時(shí)間了解XR資訊
關(guān)注VR陀螺官網(wǎng)（vrtuoluo.cn）
投稿/爆料：tougao@youxituoluo.com
稿件/商務(wù)合作： 六六（微信 13138755620）
加入行業(yè)交流群：六六（微信 13138755620）
