unite2017大會(huì)教育研討會(huì)專場，來自同濟(jì)大學(xué)的教授王建民分享了《基于Unity的智能汽車虛擬駕駛仿真器開發(fā)與教學(xué)應(yīng)用》的主題演講，并介紹同濟(jì)大學(xué)在智能汽車方面的研究成果。 以下是VR陀螺整理的演講內(nèi)容（略有刪減） 同濟(jì)大學(xué)做互動(dòng)展示制作了13年，到了2014年的時(shí)候，我們開始航天做信息展示的時(shí)候，我們就到處找，正好Unity辦公室里面很多設(shè)備，就開始做了。為什么切到這，我們怎么樣一步一步圍繞科研做的。因?yàn)閁nity平臺(tái)真的可以做很多事情。 “仗著大環(huán)境好” 同濟(jì)大學(xué)切入智能汽車 我們實(shí)驗(yàn)室有11間是專業(yè)方面的實(shí)驗(yàn)室，很近我們圍繞車的方面都在做整合，同濟(jì)大學(xué)關(guān)注是科研，我們不做游戲。往下大家可能有一些背景跟Unity不是非常相關(guān)的，大家看到我們?yōu)槭裁磿?huì)慢慢拿Unity來做。我們主要是做交互體驗(yàn)的，所有屏幕方面的東西我們都管。當(dāng)然現(xiàn)在一個(gè)外延，比如說像虛擬現(xiàn)實(shí)，這是我們一個(gè)外延，我可以做。車的話是因?yàn)槲覀兺瑵?jì)大學(xué)厲害，做車同濟(jì)、交大都有一批一批人在做車，所以我們仗著大環(huán)境好。 昨天下午在同濟(jì)我們跟汽車學(xué)院做了一個(gè)論壇，上?？莆浅ｊP(guān)注，5個(gè)汽車方向之一，汽車領(lǐng)域的人機(jī)交互，因?yàn)槔系钠嚧蠹屹I車，都是看外形，新的汽車買車未來都是看體驗(yàn)，體驗(yàn)怎么來做？特別智能汽車怎么來做，這個(gè)是大家關(guān)注到的。 我們原本是做交互的，所以我們要做車。他們做的未來得汽車，5G是未來的，5G對于手機(jī)來講就是快一點(diǎn)，沒有特別的，但是5G對于什么東西很大的應(yīng)用，就是物聯(lián)網(wǎng)，像汽車這些。未來車可以聯(lián)網(wǎng)的，當(dāng)你要撞到一個(gè)車的時(shí)候，兩個(gè)車自己會(huì)對話，兩個(gè)車自己會(huì)回避，你根本不用去管的，這個(gè)是我們聯(lián)網(wǎng)汽車做的事情，這個(gè)已經(jīng)是非常非?？?。 在上海嘉定區(qū)，包括同濟(jì)大學(xué)有幾個(gè)測試場地，一投都是若干億往里面投。未來車在人工駕駛之外會(huì)有智能的東西，這個(gè)比無人駕駛來得更快。今年上海車展基于智能駕駛的東西越來越多，這個(gè)是我們在做的。我們要仿真一輛車，把它放在智能環(huán)境里面，這個(gè)車要跟環(huán)境做交互，交互完之后能把界面輸出給我們駕駛員，這個(gè)界面大家很后做設(shè)計(jì)。所以我們首先造一個(gè)虛擬環(huán)境，然后才有我們設(shè)計(jì)。這個(gè)大家直接到美國交通署上面直接可以看到。 智能汽車虛擬駕駛仿真器開發(fā)過程 我們有自己的一套教育體系，這是經(jīng)典的，這些經(jīng)典的方法到了車以后怎么變，這是我們在2012年做的車載，GPS中控，我們在2012年項(xiàng)目目標(biāo)當(dāng)車如果能聯(lián)網(wǎng)以后中控怎么去變。這是我們在2012年的課題，它本身都是帶聯(lián)網(wǎng)功能的。這些在經(jīng)典的交互設(shè)計(jì)里面可以做的，它只有一塊屏，這個(gè)屏跟手機(jī)沒有什么太大的差別，只是環(huán)境壓在車?yán)锩妗?我們?nèi)ツ陰鸵粋€(gè)車廠做了三輛車體驗(yàn)感官評價(jià)，這個(gè)也是經(jīng)典的方法，拿眼動(dòng)儀，經(jīng)典調(diào)研實(shí)驗(yàn)方法，這個(gè)跟仿真環(huán)境也沒有什么關(guān)系，這些用原來傳統(tǒng)的方法都可以去做的。但是到了智能車以后，到了剛才美國視頻展示這個(gè)概念以后，車的話只是一個(gè)載體，這個(gè)車?yán)锩娓嗟臇|西是要實(shí)時(shí)要被環(huán)境所感知到，傳過來，我們?nèi)瞬还馐悄阕约旱碾p手和眼睛，車本身也幫你駕駛一部分東西，所以我們要構(gòu)造一個(gè)智能化車聯(lián)網(wǎng)的環(huán)境，這個(gè)時(shí)候就開始去找什么樣的東西能夠幫我把聯(lián)網(wǎng)環(huán)境建立起來。 這是我們早期去年上半年做的一些車的設(shè)計(jì)，我們要去做車，很簡單的流程是這個(gè)樣子，前面是設(shè)計(jì)，很后一塊是測試，測試不敢讓學(xué)生開到路上，我們做實(shí)驗(yàn)的時(shí)候，邀請外面的人，邀請一年，我們承擔(dān)承擔(dān)很多風(fēng)險(xiǎn)讓他做測試。所以我們一定要構(gòu)造一個(gè)環(huán)境。早期很多很多廠商到了同濟(jì)大學(xué)給我們捐獻(xiàn)環(huán)境，我們拿別的環(huán)境里面的構(gòu)造的，同濟(jì)大學(xué)除了這個(gè)以外還有更貴的，還有千萬的仿真環(huán)境。但是這些環(huán)境更強(qiáng)調(diào)仿真的交通，或者仿真車。但是它不仿真互動(dòng)。 智能汽車三要素：抬頭顯示、車聯(lián)網(wǎng)、人＆車＆車互動(dòng) 我們要做什么東西呢？這是一個(gè)虛擬的車，在這個(gè)模型里面，未來要在任何地方要去放你的屏幕的。比方說我們抬頭顯示，在導(dǎo)航屏幕上顯示這個(gè)屏幕，抬頭顯示是今年車展一個(gè)大亮點(diǎn)，抬頭顯示是AR虛擬現(xiàn)實(shí)的東西，未來車抬頭顯示在玻璃上有東西的。 任何地方我們都要放屏幕，這個(gè)時(shí)候我們怎么拿一個(gè)虛擬現(xiàn)實(shí)的東西把這個(gè)渲出來，而且能夠交互，能夠跟我們駕駛員的行為交互，沒有辦法，我們就找Unity。這張圖跟我們交通輔助是一樣，因?yàn)槲覀円獦?gòu)造若干個(gè)U2X，我們U2U，然后U2X，然后我們再做界面。 2015年底做虛擬測試版，這是一個(gè)單人的加一個(gè)攝像頭，我們可以把交通仿真出來，可以把車仿真出來，這個(gè)事情并不難，這個(gè)事情大概用了三個(gè)多月，四個(gè)月的樣子，基本上我們所需要的一輪場景就出來了。我們可以測這些東西，我們重要是做下面那個(gè)東西，下面那個(gè)是構(gòu)造了在未來車聯(lián)網(wǎng)里面9個(gè)場景的駕駛車，現(xiàn)在在同濟(jì)大學(xué)，嘉定西邊專門做一個(gè)測試場，30多個(gè)場景，今年上海市政府測到高速上面所有的道路，所有的路徑，所有的信號燈全部要車聯(lián)網(wǎng)，這是今年年底要做完的。這件事情我們要跟著上海步伐，所以我們要將虛擬場景建到我們環(huán)境里面去，目標(biāo)不是把這個(gè)車做得多么漂亮，關(guān)鍵是車要跑環(huán)境里面，環(huán)境要對應(yīng)數(shù)據(jù)要過來，驅(qū)動(dòng)我的界面要去變，我們?nèi)プ鼋换ァ?車聯(lián)網(wǎng)有一個(gè)問題，我們怎么去仿真出來車車之間的關(guān)系，后來又逼著我們謝老師抓團(tuán)隊(duì)，大概又用了三個(gè)月的時(shí)間，我們把多人副駕做出來，它在所有場景里面每一段做AI車，周圍有一堆車在動(dòng)，但是動(dòng)的東西只能算法不能跟著我去撞，撞到一塊把信號傳過來，回避它。所以我們就把聯(lián)網(wǎng)的功能做出來了，我們看到這個(gè)功能，當(dāng)時(shí)自己在摸，也用了點(diǎn)時(shí)間，但是做通了，邏輯上面若干輛車同時(shí)駕。 這個(gè)是我們環(huán)境做得專業(yè)一點(diǎn)，車變成真的車，在做一個(gè)環(huán)評，要把抬頭顯示做進(jìn)去。包括中控器、儀表盤，還有抬頭顯示，我們大概接近20多塊屏，我們要做20多路的信號獨(dú)立渲染出來，放在獨(dú)立的屏上面，沒有Unity做不到的。 因?yàn)楝F(xiàn)在也有一些學(xué)校找到我們，原來他們用的其他人做的封閉的虛擬現(xiàn)實(shí)環(huán)境，硬件做的都很貴，希望我們把設(shè)計(jì)學(xué)院的老師放進(jìn)去，所以我們怎么把這個(gè)界面捐出來，這是我們的工作。所以有的老師找我們，希望把界面那部分分享給他們。 謝謝大家！