第六章事件與交互：讓世界生動(dòng)起來事件與交互：讓世界生動(dòng)起來01事件與交互：讓世界生動(dòng)起來【本章目標(biāo)】VR交互概述基于手勢識(shí)別的交互技術(shù)基于動(dòng)作捕捉的交互技術(shù)基于眼球跟蹤的交互技術(shù)基于臉部識(shí)別的交互技術(shù)事件與交互：讓世界生動(dòng)起來基于語音控制的交互技術(shù)基于觸覺反饋的交互技術(shù)基于真實(shí)場地的交互技術(shù)實(shí)戰(zhàn)：讓模型動(dòng)起來事件與交互：讓世界生動(dòng)起來【本章目標(biāo)】AB掌握事件交互制作了解各種交互技術(shù)事件與交互：讓世界生動(dòng)起來VR交互概述交互即是交流與互動(dòng)，普通的計(jì)算機(jī)系統(tǒng)通常使用鍵盤，鼠標(biāo)和觸摸屏等外設(shè)進(jìn)行交互。而在計(jì)算機(jī)系統(tǒng)提供的虛擬空間中，人們可以使用眼睛、耳朵、皮膚、手勢和語音等各種感覺方式直接與之發(fā)生交互，這就是虛擬環(huán)境下的交互技術(shù)。虛擬現(xiàn)實(shí)領(lǐng)域中常見的交互技術(shù)主要有手勢識(shí)別、面部表情識(shí)別、眼動(dòng)跟蹤以及語音識(shí)別等。0102事件與交互：讓世界生動(dòng)起來基于手勢識(shí)別的交互技術(shù)手勢識(shí)別系統(tǒng)利用數(shù)據(jù)手套和位置跟蹤器捕捉手勢在空間運(yùn)動(dòng)的軌跡和時(shí)序信息，對較為復(fù)雜的手的動(dòng)作進(jìn)行檢測，包括手的位置、方向和手指彎曲度等，并可根據(jù)這些信息對手勢進(jìn)行分析，如圖6-1所示。圖6-1手套識(shí)別技術(shù)事件與交互：讓世界生動(dòng)起來基于臉部識(shí)別的交互技術(shù)BinaryVR是一款可以實(shí)現(xiàn)人臉識(shí)別的工具，可以實(shí)現(xiàn)人臉表情追蹤，讓人用表情和語言與電腦進(jìn)行互動(dòng)，如圖6-2所示。BinaryVR臉部識(shí)別技術(shù)通過將面部重要的信息點(diǎn)數(shù)據(jù)進(jìn)行采集，快速轉(zhuǎn)化成簡單的3D模型，最后再通過立體動(dòng)畫的形式展現(xiàn)給觀眾。通過BinaryVR人臉識(shí)別，可以分析出人的臉部表情，然后如實(shí)地傳達(dá)出表情和情緒。圖6-2BinaryVR臉部識(shí)別技術(shù)基于眼球跟蹤的交互技術(shù)眼球交互是近幾年才興起的VR交互技術(shù)，其關(guān)鍵點(diǎn)在通過檢測眼球的運(yùn)動(dòng)，瞳孔的擴(kuò)張等方式推算出用戶所注視的位置和景深，甚至可以通過這些參數(shù)變化了解到用戶的情緒，以此控制VR場景進(jìn)行變化。例如，在“Eyefluence”中，用戶可以通過眼球控制軟件操作，使其上下滾屏。試想，如果你通過電腦閱讀本書。而后，只要你兩眼向左一瞥就可以自動(dòng)翻頁。而你向下看就可以滾動(dòng)條下移，向上看滾動(dòng)條就可以上移。這樣，就可以真正實(shí)現(xiàn)趟在床上看書咯。這種交互形式在FPS游戲中也有廣泛的應(yīng)用，現(xiàn)行的游戲都是使用鼠標(biāo)控制準(zhǔn)星的位置完成瞄準(zhǔn)的動(dòng)作。而有了眼球跟蹤技術(shù)，就可以實(shí)現(xiàn)用眼神瞄準(zhǔn)。這樣，F(xiàn)PS游戲也就不再是單純的游戲，而真正可以作為軍事模擬器為士兵提供模擬射擊練習(xí)。事件與交互：讓世界生動(dòng)起來圖6-2眼球跟蹤模擬器基于動(dòng)作捕捉的交互技術(shù)基于動(dòng)作捕捉的交互技術(shù)較為常見，大部分的體感VR設(shè)備都使用了動(dòng)作捕捉技術(shù)，比如Kinect。這種技術(shù)廣泛應(yīng)用于影視制作和游戲娛樂，甚至在不少影視作品或者科幻小說中，那些外星人使用各種投影鍵盤其實(shí)都可以歸類于動(dòng)作捕捉的VR交互。現(xiàn)代新式體感游戲能夠模擬出三維場景，玩家手握專用游戲手柄，通過自己身體的動(dòng)作來控制游戲中人物的動(dòng)作，能夠讓玩家“全身”投入到游戲當(dāng)中，享受到體感互動(dòng)的新體驗(yàn)。如果你試圖開發(fā)一個(gè)VR運(yùn)動(dòng)游戲，那么動(dòng)作捕捉就是不二的交互選擇。事件與交互：讓世界生動(dòng)起來圖6-3體感交互設(shè)備Kinect現(xiàn)在，語音識(shí)別技術(shù)和語音轉(zhuǎn)換技術(shù)已經(jīng)越來越成熟了，很多應(yīng)用程序或智能設(shè)備使用語音進(jìn)行控制，比如微軟的小娜，蘋果的Siri，科大訊飛和小米的智能音箱等。在VR交互里，語音交互是一種重要手段。在VR場館中，走近展品就可以聽到解說詞。在VR游戲中，通過腳步聲識(shí)別敵人的位置等，都屬于這種交互技術(shù)。事件與交互：讓世界生動(dòng)起來基于語音控制的交互技術(shù)基于觸覺反饋的交互技術(shù)基于觸覺反饋的交互技術(shù)是偏向于向用戶反饋結(jié)果的。觀察最近幾年的游戲手柄就可以看出，大部分手柄都有了震動(dòng)的功能。這種交互技術(shù)更注重于向用戶反饋一種震撼的感覺，提升游戲的打擊感。比如，在VR游戲中，如果玩家使用了一個(gè)威力超大的招式，就可以明顯的感覺到屏幕在震動(dòng)，手柄也同步地在震動(dòng)。這種反饋會(huì)給用戶非常強(qiáng)烈的游戲體驗(yàn)。有的游戲使用震動(dòng)作為線索。有一款VR游戲中，玩家在觸摸手柄時(shí)，如果感覺到震動(dòng)，則說明在玩家附近擁有一些線索，而且距離線索越近，則震動(dòng)越強(qiáng)烈。以此，玩家可以找到自己需要的物品。事件與交互：讓世界生動(dòng)起來圖6-4擁有震動(dòng)功能的游戲手柄基于真實(shí)場地的交互技術(shù)如果說以上所有的交互技術(shù)都不夠真實(shí)的話，那么基于真實(shí)場地的交互技術(shù)就是真正的將虛擬搬到現(xiàn)實(shí)的交互技術(shù)。它創(chuàng)造一個(gè)逼真的虛擬與現(xiàn)實(shí)相結(jié)合的世界。用戶身處一個(gè)大空間里，眼前看到的是虛擬的游戲場景，感覺卻是如此真實(shí)！因?yàn)樗吹降挠螒蛉宋锞褪橇硗獾恼嫒?。所有的游戲玩家都是游戲中的人物，大家共同生活、?zhàn)斗在一個(gè)“真實(shí)”的虛擬場景中。場景甚至有霧有風(fēng)還有雨，玩家能真切感受到風(fēng)吹雨淋，這種全方位的視覺、觸覺令人極為震撼。事件與交互：讓世界生動(dòng)起來圖6-5虛擬現(xiàn)實(shí)主題公園實(shí)戰(zhàn)：讓模型動(dòng)起來在上一章的實(shí)戰(zhàn)中，我們?yōu)槲锲吩O(shè)置了動(dòng)畫。在本節(jié)，將為這些動(dòng)畫增加事件交互功能，讓模型動(dòng)起來shi’jiao。【目標(biāo)】對一個(gè)已設(shè)置好動(dòng)畫的物品添加事件交互?！救藛T】獨(dú)立完成?！緯r(shí)間】本實(shí)戰(zhàn)項(xiàng)目在1小時(shí)內(nèi)完成（0.5小時(shí)內(nèi)完成為優(yōu)秀，1小時(shí)內(nèi)完成為合格）。找到上一實(shí)戰(zhàn)項(xiàng)目中保存的抽屜項(xiàng)目，點(diǎn)擊“編輯”按鈕，開始對上一項(xiàng)目再次編輯。如圖6-6所示。事件與交互：讓世界生動(dòng)起來圖6-6項(xiàng)目編輯事件與交互：讓世界生動(dòng)起來實(shí)戰(zhàn)：讓模型動(dòng)起來進(jìn)入項(xiàng)目編輯狀態(tài)后，點(diǎn)擊部件chouti_1，再選擇左邊工具欄中的事件，界面進(jìn)入事件編輯狀態(tài)，開始添加事件交互功能，如圖6-7所示。點(diǎn)擊“添加事件”的“鼠標(biāo)點(diǎn)擊”，列表中有“鼠標(biāo)事件”和“動(dòng)畫事件”，如圖6-8所示。此時(shí)鼠標(biāo)放到OUT上，移動(dòng)鼠標(biāo)至OUT上，會(huì)發(fā)現(xiàn)OUT被點(diǎn)亮，此時(shí)按住鼠標(biāo)左鍵不放，將OUT拖到IN處