日?qǐng)?bào):Valve推出SteamVR移動(dòng)應(yīng)用Holoswitch;蘋果發(fā)布首款A(yù)R/VR應(yīng)用專利:可為用戶導(dǎo)航的情景感知CGR數(shù)字助手
發(fā)布時(shí)間:2020-03-30 11:13 | 標(biāo)簽:
HTC AR Steam VR Valve 蘋果 GDC 2020
微信掃一掃:分享
微信里點(diǎn)“發(fā)現(xiàn)”,掃一下
二維碼便可將本文分享至朋友圈
看日?qǐng)?bào)是個(gè)好習(xí)慣!
Valve推出SteamVR移動(dòng)應(yīng)用Holoswitch,支持PC VR與智能手機(jī)交互
Holoswitch是SteamVR的移動(dòng)應(yīng)用程序,可在早期訪問中使用,它可讓用戶與智能手機(jī)進(jìn)行交互,而無需卸下VR頭戴設(shè)備。
通過PC客戶端將智能手機(jī)與計(jì)算機(jī)配對(duì),用戶可以將電話、短信、重要的應(yīng)用程序通知直接轉(zhuǎn)發(fā)到VR頭顯,從而使用戶 可以與外界互動(dòng),而不會(huì)沉浸其中。通過將智能手機(jī)用作監(jiān)控?cái)z像頭,用戶甚至可以隨時(shí)查看現(xiàn)實(shí)環(huán)境。
該公司在正式版本中表示:“到目前為止,虛擬現(xiàn)實(shí)技術(shù)的用戶必須定期檢查他們?cè)诂F(xiàn)實(shí)生活中是否遺漏了某些東西”。 “一直擔(dān)心錯(cuò)過電話,朋友或家人與用戶交談或在用戶家門口等著送貨,這使得長(zhǎng)時(shí)間享受VR變得困難。”
“ Holoswitch幫助消除社交和現(xiàn)實(shí)世界隔離的障礙,從而使更多的人可以在更長(zhǎng)的時(shí)間內(nèi)享受VR。每當(dāng)現(xiàn)實(shí)生活需要關(guān)注時(shí),用戶就會(huì)意識(shí)到這一點(diǎn),并使他們擺脫害怕錯(cuò)過的恐懼。”
“如果我在VR上度過一個(gè)晚上,我總會(huì)想念一些東西。”其中一位應(yīng)用程序Beta測(cè)試人員說,“在比賽進(jìn)行中摘下頭顯或僅在手機(jī)上查看消息時(shí),這很煩人。有了Holoswitch,我終于可以放松并在虛擬空間中閑逛更長(zhǎng)的時(shí)間了。每當(dāng)我收到消息或通知時(shí),都可以直接在頭顯中看到它們。“
Holoswitch現(xiàn)在可在所有OpenVR兼容頭顯上以$ 5.99的價(jià)格購買,包括HTC Vive、Valve Index、Oculus Rift / Rift S、Oculus Quest、Windows Mixed Reality。設(shè)置非常簡(jiǎn)單。只需安裝PC客戶端和移動(dòng)應(yīng)用程序,將頭顯與智能手機(jī)配對(duì),然后選擇要接收的通知即可。目前,僅支持Android設(shè)備,盡管該公司承諾在不久的將來支持iOS。
雖然HTC確實(shí)是在2016年發(fā)布了自己的移動(dòng)伴侶應(yīng)用程序,該應(yīng)用程序還允許玩家在VR時(shí)與他們的移動(dòng)設(shè)備進(jìn)行交互,但該應(yīng)用程序非常笨拙,并且缺乏對(duì)電子郵件和基本消息傳遞應(yīng)用程序的支持。希望Holoswitch可以為用戶提供更穩(wěn)定的頭顯內(nèi)通信系統(tǒng)。
在游戲全面發(fā)布后,該公司希望包括幾個(gè)附加功能,包括電話鏡像、VR中的直接視頻通話、語音轉(zhuǎn)文本功能、無鍵盤打字、實(shí)時(shí)流媒體。
蘋果發(fā)布首款A(yù)R/VR應(yīng)用專利:可為用戶導(dǎo)航的情景感知CGR數(shù)字助手
今天,美國專利商標(biāo)局發(fā)布了蘋果公司的專利申請(qǐng),這可能是AR/VR內(nèi)容相關(guān)的第一個(gè)專利申請(qǐng)。未來的蘋果頭顯設(shè)備系統(tǒng)可能會(huì)允許用戶調(diào)用情景感知CGR數(shù)字助手(Contextual CGR Digital Assistant),以在用戶遇到某個(gè)困難時(shí)刻為他們提供幫助。
以下是蘋果使用情景感知數(shù)字助手的示例之一。
蘋果公司在專利圖FIGS. 4R-4T顯示了上下文CGR數(shù)字助手的各種可視表示,該助手可在CGR#400環(huán)境中提供導(dǎo)航。
在圖4R所示,用戶#405正在沿著路徑(#442)朝火車站(#444)?;疖囌?44上方是時(shí)鐘。時(shí)鐘上顯示的時(shí)間表示用戶計(jì)劃乘坐的火車即將到達(dá)。在一些實(shí)施方式中,情景感知CGR數(shù)字助手可以通過pass-through圖像識(shí)別為用戶提供車站的路徑導(dǎo)航和引導(dǎo)。情景感知觸發(fā)包括例如時(shí)間、用戶配置文件和用戶的身體姿勢(shì),或通向火車站的路徑等。
海豚通常被認(rèn)為是地球上最聰明的動(dòng)物之一,它們可以利用地球磁場(chǎng)進(jìn)行導(dǎo)航。此外,眾所周知的是海豚能夠與人互動(dòng)。基于海豚的這些特征,如圖2所示,在圖4S中,海豚被選擇作為情景感知CGR數(shù)字助手的視覺表示,以提供導(dǎo)航并將用戶引導(dǎo)到火車站。在圖4S中,路徑#442上的覆蓋物顯示為水,海豚在水中游泳。
在一些實(shí)施方式中,情景感知提示取決于包括與用戶相關(guān)聯(lián)的日歷事件,例如火車時(shí)間表和當(dāng)前時(shí)間。例如,如果火車的發(fā)車時(shí)間和用戶的當(dāng)前時(shí)間較接近,需要指示用戶趕火車,則計(jì)算機(jī)生成的海豚會(huì)加快游泳速度,以引導(dǎo)用戶快速前往火車站。
另一方面,如果情景感知指示用戶有足夠的時(shí)間趕火車,則計(jì)算機(jī)生成的海豚可能會(huì)以相對(duì)較慢的速度朝火車站游泳。
當(dāng)用戶處于游戲或計(jì)算機(jī)生成的現(xiàn)實(shí)環(huán)境中時(shí),如蘋果所說,有時(shí)用戶會(huì)“不知所措”,甚至迷失方向。更具體地說,在適當(dāng)?shù)那闆r下,情景感知CGR數(shù)字助手將合成到現(xiàn)實(shí)場(chǎng)景中,并響應(yīng)于特定的圖像數(shù)據(jù),將信息提供給用戶。因此,情景感知CGR數(shù)字助手巧妙地將用戶的注意力吸引到相關(guān)的媒體內(nèi)容,來幫助用戶從合成現(xiàn)實(shí)場(chǎng)景中獲取信息。
此外,由于情景感知CGR現(xiàn)實(shí)數(shù)字助手的表現(xiàn)形式取決于人們所期望的或與特定表示相關(guān)聯(lián)的文化理解,因此使用情景感知CGR數(shù)字助手能在現(xiàn)實(shí)場(chǎng)景提供更自然的用戶體驗(yàn)。
例如,在了解狗的快速運(yùn)動(dòng)能力和獲取商品的能力后,當(dāng)用戶注意到餐廳(真實(shí)世界或CGR)時(shí),計(jì)算機(jī)生成的狗可以用作情景感知CGR數(shù)字助手的可視表示形式,以為用戶快速獲取餐廳信息。
其他示例包括顯示由計(jì)算機(jī)生成的貓,通過貓將用戶帶到有趣的地方;或由計(jì)算機(jī)生成的獵鷹飛來飛去,以給定某個(gè)區(qū)域的平面圖;計(jì)算機(jī)生成的海豚(如游戲示例所示)將用戶位置引導(dǎo)至圖4R和4S等。
將這些虛擬動(dòng)物形象化作為情景感知CGR數(shù)字助手的可視化表示,使用戶可以從CGR環(huán)境中獲取信息而不會(huì)感到不知所措。
作為非動(dòng)物示例,在某些文化中,天空中的北斗七星星座能提供方向指引?;谶@種文化理解,計(jì)算機(jī)生成的北斗七星星座將作為情景感知CGR數(shù)字助手顯示在CGR場(chǎng)景中,以向用戶指示方向。
情景感知CGR數(shù)字助手的工作方式可能取決于用戶正在查看內(nèi)容的顯示類型,因?yàn)樗鼤?huì)隨VR頭顯、iPhone、iPad或擋風(fēng)玻璃上的平視顯示器而變化。
當(dāng)然,情景感知CGR數(shù)字助手也將在未來應(yīng)用于多種環(huán)境,以旅游業(yè)為例,智能眼鏡將能夠使用該數(shù)字助手來將游客導(dǎo)航至熱門餐館、頂級(jí)博物館和著名景點(diǎn)。
從這項(xiàng)最新的專利申請(qǐng)中可以看出,蘋果正在為將來的HMD系統(tǒng)開發(fā)潛在的新軟件,這很可能只是未來HMD硬件配套軟件內(nèi)容的開始。
由于這是蘋果的第一款A(yù)R/VR軟件產(chǎn)品,因此很難完全理解他們的概念。但是,我們大多數(shù)人都熟悉Siri,Google助手和Alexa,而蘋果的愿景是為未來的VR,AR和混合現(xiàn)實(shí)系統(tǒng)創(chuàng)建類似的情景感知數(shù)字助手,通過引入數(shù)字對(duì)象互動(dòng),協(xié)助我們進(jìn)行導(dǎo)航等功能。
蘋果新專利:未來頭顯設(shè)備或帶可互換鏡頭的顯示系統(tǒng),以適應(yīng)不同用戶視力
1月下旬,蘋果公司以專利方式發(fā)布了一份申請(qǐng)報(bào)告,標(biāo)題為“蘋果公司發(fā)明詳述了用于未來的頭戴式顯示設(shè)備的處方鏡片系統(tǒng)”。蘋果公司的這項(xiàng)專利與未來的混合現(xiàn)實(shí)頭顯相關(guān),該頭顯允許佩戴處方眼鏡的用戶將其帶有度數(shù)的鏡片放入頭顯中,從而無需在頭顯中額外佩戴眼鏡,避免不適感。今天,美國專利商標(biāo)局發(fā)布了蘋果公司的另一項(xiàng)專利申請(qǐng),其中詳細(xì)介紹了未來的可更換鏡頭的頭戴式顯示器(HMD)系統(tǒng)以及支持該硬件的系統(tǒng)。
帶可互換鏡頭的顯示系統(tǒng)
頭戴式顯示器(HMD)是戴在用戶頭上的一種顯示設(shè)備,包括一個(gè)或多個(gè)用于向用戶顯示圖形的顯示模塊。不同的使用者可能具有不同的視力,因此需要佩戴不同的矯正眼鏡。
蘋果的發(fā)明涵蓋了顯示系統(tǒng)。在一個(gè)實(shí)施方式中,顯示系統(tǒng)包括顯示器,可移動(dòng)透鏡組件和透鏡檢測(cè)傳感器。
可移動(dòng)鏡頭能夠移動(dòng)耦合到顯示器。鏡頭檢測(cè)傳感器能夠檢測(cè)耦合到顯示器的可移動(dòng)鏡頭組件。該顯示系統(tǒng)還可以包括頭戴式顯示單元,該頭戴式顯示單元包括顯示器和鏡頭檢測(cè)傳感器。顯示系統(tǒng)可以利用透鏡檢測(cè)傳感器從可移動(dòng)透鏡確定透鏡信息,并且可以根據(jù)透鏡信息提供可移動(dòng)透鏡的指示符。
在另一實(shí)施方式中,提供了一種用于操作頭戴式顯示單元的方法,該方法包括:識(shí)別耦合至頭戴式顯示單元的顯示模塊的可移動(dòng)鏡頭;以及根據(jù)該可移動(dòng)鏡頭的識(shí)別來提供指示。該指示可以是在可移動(dòng)透鏡和可耦合至顯示模塊的另一塊可移動(dòng)透鏡之間不同的配置指示。該方法可以進(jìn)一步識(shí)別用戶,而該指示可以是可移動(dòng)鏡片和用戶之間的兼容性指示。
在該實(shí)施方式中,顯示系統(tǒng)包括頭戴式顯示單元和可移動(dòng)透鏡組件。其中頭戴式顯示單元包括顯示模塊??梢苿?dòng)透鏡組件包括透鏡元件和聯(lián)接至透鏡元件的框架??梢苿?dòng)透鏡組件可以以單個(gè)定向移動(dòng)到顯示模塊,其中磁性附接特征耦合到框架并且圍繞透鏡元件。
最后,可根據(jù)不同使用者的眼睛特征(例如,根據(jù)眼鏡度數(shù))來配置可互換鏡片。例如,一對(duì)可互換的鏡片可以與一個(gè)用戶相關(guān)聯(lián)(例如,規(guī)定給一個(gè)用戶)??苫Q的鏡頭可安裝到頭戴式顯示單元,使得頭戴式顯示單元能夠適應(yīng)具有不同眼鏡度數(shù)的用戶。
蘋果的專利圖1是顯示系統(tǒng)的側(cè)視圖,其具有以虛線示出的隱藏組件;圖2是圖1顯示系統(tǒng)的剖視圖。圖1沿圖2的2-2線截取。圖13E是處于部分結(jié)合狀態(tài)的顯示模塊的剖視圖。
更具體地說,蘋果的專利圖1和2是VR或混合現(xiàn)實(shí)顯示系統(tǒng)以及一個(gè)或多個(gè)可移動(dòng)鏡頭組件#120的一部分。
參考專利圖13E:為了將可拆卸鏡頭組件#1320耦合到顯示模塊#1310,首先將鏡頭機(jī)械耦合部件#1322插入到顯示器機(jī)械耦合部件1#312中,然后旋轉(zhuǎn)可拆卸透鏡組件從而讓磁耦合部件#1324和#1314彼此靠磁耦合。
蘋果的專利圖14A是顯示系統(tǒng)的示意圖;圖15是用于確定可移動(dòng)鏡頭與用戶兼容性的過程的流程圖。
參照?qǐng)D14A,顯示系統(tǒng)#100可以使用耦合的可移動(dòng)透鏡組件#120的透鏡信息來確定與用戶的兼容性,并以此向用戶提供兼容性指示符。
除了確定耦合至頭戴式顯示單元的可移動(dòng)鏡頭組件的鏡頭信息之外,顯示系統(tǒng)還標(biāo)識(shí)當(dāng)前用戶,并將用戶信息與鏡頭信息進(jìn)行比較以確定兼容性。
顯示系統(tǒng)可以以各種方式來識(shí)別用戶,例如,通過生物特征感測(cè),用戶憑證的接收或另一設(shè)備的認(rèn)證。為了通過生物特征識(shí)別用戶,顯示系統(tǒng)可以包括生物特征傳感器#1418d,以利用生物特征(例如,面部識(shí)別、指紋識(shí)別、語音識(shí)別、虹膜識(shí)別或其他生物特征參數(shù)識(shí)別來判斷用戶幾何形狀、骨骼傳導(dǎo)或密度特征、前額特征或皮膚等)。
生物識(shí)別傳感器物理耦合至頭戴式顯示單元。例如,在利用虹膜檢測(cè)識(shí)別用戶的情況下,生物特征傳感器可以是針對(duì)眼睛的攝像機(jī)。
為了識(shí)別用戶,顯示系統(tǒng)可從其輸入設(shè)備或與之相關(guān)聯(lián)的輸入設(shè)備(例如,頭戴式顯示單元的麥克風(fēng)或外部設(shè)備)接收用戶認(rèn)證(例如,用戶名和密碼),從而與控制器或頭戴式顯示單元通信。
為了通過來自另一設(shè)備的認(rèn)證來識(shí)別用戶,外部設(shè)備可以對(duì)用戶進(jìn)行認(rèn)證并將其傳達(dá)給控制器。外部設(shè)備可以被認(rèn)為是顯示系統(tǒng)的一部分,但可以獨(dú)立于其運(yùn)行(例如,iPhone)。
美國專利局于今天發(fā)布的這款蘋果公司專利申請(qǐng)已于2019年第二季度提交??紤]到這是專利申請(qǐng),目前尚不知道這種產(chǎn)品何時(shí)能夠上市。
蘋果正測(cè)試新AR頭顯及應(yīng)用,或?qū)⑹褂妙愃芕ive的控制手柄
近年來,蘋果公司對(duì)增強(qiáng)現(xiàn)實(shí)(AR)的興趣眾所周知,并且有傳言稱該公司正在開發(fā)AR頭顯,且該項(xiàng)目已經(jīng)進(jìn)行了很長(zhǎng)時(shí)間的開發(fā)?,F(xiàn)在,新的證據(jù)表明,蘋果的這項(xiàng)計(jì)劃比以往更接近完成狀態(tài)。
根據(jù)MacRumors的說法,即將發(fā)布的iOS 14操作系統(tǒng)的泄露版本包含一張照片,該照片似乎是AR/VR或?qū)烧呓Y(jié)合在一起的稱為“混合現(xiàn)實(shí)”頭顯設(shè)備的控制器。
它看起來與HTC Vive Focus所用的控制器非常相似,后者是目前市場(chǎng)上的另一款VR頭顯設(shè)備。這很重要,因?yàn)橛袀餮苑Q蘋果與HTC方面擁有悠久的合作歷史。彭博社(Bloomberg)在2017年報(bào)道說,兩家公司正在合作開發(fā)AR頭顯。這張最新照片可能表明該合作伙伴關(guān)系還很健康。
2020年3月,9to5Mac在iOS 14 Beta中找到了代碼,這表明蘋果正在開發(fā)一個(gè)名為“ Gobi”的新AR應(yīng)用程序。雖然該應(yīng)用程序似乎適用于iPhone(例如,當(dāng)人們?cè)贏pple Store中查看產(chǎn)品時(shí)可實(shí)現(xiàn)AR體驗(yàn)),但人們認(rèn)為Apple可以使用它來測(cè)試其混合現(xiàn)實(shí)頭顯項(xiàng)目。
MacRumors還認(rèn)為,蘋果公司正在為其新生的頭顯測(cè)試AR人行橫道保齡球游戲。該應(yīng)用程序?qū)⒃试S用戶過馬路時(shí)的等待時(shí)間玩一款保齡球相關(guān)的虛擬游戲。目前,該游戲只能在加利福尼亞州桑尼維爾的555 N. Mathilda Ave附近的一個(gè)交叉路口觸發(fā),該交叉口位于蘋果公司名為“ Mathilda 3”的辦公室附近。靠近該辦公室意味著這可能是蘋果正在開發(fā)其頭顯的地方。
HTC將在線上舉行其所有GDC 2020演講
由于冠狀病毒的爆發(fā)(COVID-19),今年的游戲開發(fā)者大會(huì)(GDC)被迫取消。但一些公司決定在網(wǎng)上給大家分享他們的開發(fā)者見解,HTC宣布會(huì)從現(xiàn)在到5月中旬的每個(gè)星期二在網(wǎng)絡(luò)上進(jìn)行實(shí)時(shí)網(wǎng)絡(luò)研討會(huì)。
從3月31日到5月12日,HTC將會(huì)直播開發(fā)人員的現(xiàn)場(chǎng)對(duì)話,這本將在GDC 2020上進(jìn)行的。
HTC還將在每個(gè)會(huì)話之后主持問答環(huán)節(jié),該會(huì)話將在每周二(太平洋標(biāo)準(zhǔn)時(shí)間)上午10點(diǎn)進(jìn)行。HTC也會(huì)將所有視頻都上傳到其YouTube頻道。
3月31日,星期二–領(lǐng)先一步:利用數(shù)據(jù)趨勢(shì)打造成功的VR體驗(yàn)
4月7日,星期二–打造明天:VIVE手動(dòng)跟蹤SDK
4月14日,星期二–使用Vive Sync在VR中遠(yuǎn)程工作
4月21日,星期二–100 + VR游戲的營銷經(jīng)驗(yàn)
4月28日,星期二– Viveport開發(fā)人員控制臺(tái):2020年將會(huì)發(fā)生什么
5月5日,星期二– XR Continuum:VR和AR結(jié)合發(fā)展
5月12日,星期二–企業(yè)的機(jī)會(huì)是什么?
Manus VR公布全身跟蹤技術(shù)解決方案Polygon
近日,科技企業(yè)Manus VR推出最新產(chǎn)品Manus Polygon,這是一款全身式的VR解決方案,并且可能支持多用戶協(xié)作。它僅需要使用5個(gè)Vive追蹤器,Polygon即可生成自然的身體運(yùn)動(dòng)。借助可提供手部跟蹤功能的Manus手套,該解決方案進(jìn)一步增強(qiáng)增強(qiáng),并有助于整合用戶的身體動(dòng)作,從而提供更身臨其境的體驗(yàn)。
多年來,Manus致力于數(shù)據(jù)手套的開發(fā),在去年成功發(fā)布其Prime系列后,Manus現(xiàn)在目標(biāo)是通過發(fā)布Polygon來提高沉浸式技術(shù)開發(fā)的門檻。該公司指出,Polygon適用于各種應(yīng)用程序,包括VR體驗(yàn),培訓(xùn)和模擬以及虛擬協(xié)作。
Polygon的關(guān)鍵屬性之一是用戶可以自行校準(zhǔn),無需來自VR體驗(yàn)之外的任何干預(yù)。僅需5個(gè)Vive跟蹤器,設(shè)置硬件就很簡(jiǎn)單,并使用戶可以輕松進(jìn)入Polygon。跟蹤器分配在校準(zhǔn)期間自動(dòng)完成。Polygon IK系統(tǒng)讀取Vive跟蹤器的運(yùn)動(dòng)并計(jì)算用戶的自然運(yùn)動(dòng)。
Polygon可以在本地或通過現(xiàn)有網(wǎng)絡(luò)提供多用戶支持。這使Polygon用戶可以彼此連接并共享其虛擬工作區(qū)。多用戶系統(tǒng)的工作原理是讓一個(gè)用戶充當(dāng)運(yùn)行模擬的主機(jī),但可以允許來賓加入環(huán)境。
第一時(shí)間了解XR資訊
關(guān)注VR陀螺官網(wǎng)(vrtuoluo.cn)
投稿/爆料:tougao@youxituoluo.com
稿件/商務(wù)合作: 六六(微信 13138755620)
加入行業(yè)交流群:六六(微信 13138755620)