含義
VR是一項綜合集成技術,涉及
計算機圖形學、
人機互動技術、
感測技術、
人工智慧等領域,它用計算機生成逼真的三維視、聽、嗅覺等感覺,使人作為參與者通過適當裝置,自然地對
虛擬世界進行體驗和互動作用。使用者進行位置移動時,電腦可以立即進行複雜的運算,將精確的3D世界影像傳回產生臨場感。該技術集成了計算機圖形(CG)技術、
計算機仿真技術、人工智慧、感測技術、
顯示技術、網路並行處理等技術的最新發展成果,是一種由計算機技術輔助生成的高技術模擬系統。
概括地說,虛擬現實是人們通過計算機對複雜數據進行可視化操作與互動的一種全新方式,與傳統的人機界面以及流行的視窗操作相比,虛擬現實在技術思想上有了質的飛躍。
虛擬現實中的“現實”是泛指在物理意義上或功能意義上存在於世界上的任何事物或環境,它可以是實際上可實現的,也可以是實際上難以實現的或根本無法實現的。而“虛擬”是指用計算機生成的意思。因此,虛擬現實是指用計算機生成的一種特殊環境,人可以通過使用各種特殊裝置將自己“投射”到這個環境中,並操作、控制環境,實現特殊的目的,即人是這種環境的主宰。
套用
虛擬現實動畫在城市規劃中的套用
城市規劃一直是對全新的可視化技術需求最為迫切的領域之一,虛擬現實技術可以廣泛的套用在城市規劃的各個方面,並帶來切實且可觀的利益: 展現規劃方案虛擬現實系統的沉浸感和互動性不但能夠給用戶帶來強烈、逼真的感官衝擊,獲得身臨其境的體驗,還可以通過其數據接口在實時的虛擬環境中隨時獲取項目的數據資料,方便大型複雜工程項目的規劃、設計、投標、報批、管理,有利於設計與管理人員對各種規劃設計方案進行輔助設計與方案評審。 規避設計風險 虛擬現實所建立的虛擬環境是由基於真實數據建立的數字模型組合而成,嚴格遵循工程項目設計的標準和要求建立逼真的三維場景,對規劃項目進行真實的“再現”。用戶在三維場景中任意漫遊,人機互動,這樣很多不易察覺的設計缺陷能夠輕易地被發現,減少由於事先規劃不周全而造成的無可挽回的損失與遺憾,大大提高了項目的評估質量。 加快設計速度運用虛擬現實系統,我們可以很輕鬆隨意的進行修改,改變建築高度,改變建築外立面的材質、顏色,改變綠化密度,只要修改系統中的參數即可。從而大大加快了方案設計的速度和質量,提高了方案設計和修正的效率,也節省了大量的資金,提供合作平台 。
虛擬現實技術能夠使政府規劃部門、項目開發商、工程人員及公眾可從任意角度,實時互動真實地看到規劃效果,更好地掌握城市的形態和理解規劃師的設計意圖。有效的合作是保證城市規劃最終成功的前提,虛擬現實技術為這種合作提供了理想的橋樑,這是傳統手段如平面圖、效果圖、沙盤乃至動畫等所不能達到的。 加強宣傳效果對於公眾關心的大型規劃項目,在項目方案設計過程中,虛擬現實系統可以將現有的方案導出為視頻檔案用來製作多媒體資料予以一定程度的公示,讓公眾真正的參與到項目中來。當項目方案最終確定後,也可以通過視頻輸出製作多媒體宣傳片,進一步提高項目的宣傳展示效果。
虛擬現實動畫在醫學中套用
VR在醫學方面的套用具有十分重要的現實意義。在虛擬環境中,可以建立虛擬的人體模型,藉助於跟蹤球、HMD、感覺手套,學生可以很容易了解人體內部各器官結構,這比現有的採用教科書的方式要有效得多。Pieper及Satara等研究者在90年代初基於兩個SGI工作站建立了一個虛擬外科手術訓練器,用於腿部及腹部外科手術模擬。這個虛擬的環境包括虛擬的手術台與手術燈,虛擬的外科工具(如手術刀、注射器、手術鉗等),虛擬的人體模型與器官等。藉助於HMD及感覺手套,使用者可以對虛擬的人體模型進行手術。但該系統有待進一步改進,如需提高環境的真實感,增加網路功能,使其能同時培訓多個使用者,或可在外地專家的指導下工作等。另外,在遠距離遙控外科手術,複雜手術的計畫安排,手術過程的信息指導,手術後果預測及改善殘疾人生恬狀況,乃至新型藥物的研製等方面,VR技術都有十分重要的意義。
虛擬現實動畫在娛樂、藝術與教育方面的套用
豐富的感覺能力與3D顯示環境使得VR成為理想的視頻遊戲工具。由於在娛樂方面對VR的真實感要求不是太高,故近些年來VR在該方面發展最為迅猛。如Chicago(芝加哥)開放了世界上第一台大型可供多人使用的VR娛樂系統,其主題是關於3025年的一場未來戰爭;英國開發的稱為“Virtuality”的VR遊戲系統,配有HMD,大大增強了真實感;1992年的一台稱為“Legeal Qust”的系統由於增加了人工智慧功能,使計算機具備了自學習功能,大大增強了趣味性及難度,使該系統獲該年度VR產品獎。另外在家庭娛樂方面VR也顯示出了很好的前景。
作為傳輸顯示信息的媒體,VR在未來藝術領域方面所具有的潛在套用能力也不可低估。VR所具有的臨場參與感與互動能力可以將靜態的藝術(如油畫、雕刻等)轉化為動態的,可以使觀賞者更好地欣賞作者的思想藝術。另外,VR提高了藝術表現能力,如一個虛擬的音樂家可以演奏各種各樣的樂器,手足不便的人或遠在外地的人可以在他生活的居室中去虛擬的音樂廳欣賞音樂會等等。
對藝術的潛在套用價值同樣適用於教育,如在解釋一些複雜的系統抽象的概念如量子物理等方面,VR是非常有力的工具,Lofin等人在1993年建立了一個“虛擬的物理實驗室”,用於解釋某些物理概念,如位置與速度,力量與位移等。
虛擬現實動畫在軍事與航天工業的套用
模擬與練一直是軍事與航天工業中的一個重要課題,這為VR提供了廣闊的套用前景。美國國防部高級研究計畫局DARPA自80年代起一直致力於研究稱為SIMNET的虛擬戰場系統,以提供坦克協同訓1練,該系統可聯結200多台模擬器。另外利用VR技術,可模擬零重力環境,以代替現在非標準的水下訓練太空人的方法。
虛擬現實在室內設計中的套用
虛擬現實不僅僅是一個演示媒體,而且還是一個設計工具。它以視覺形式反映了設計者的思想,比如裝修房屋之前,你首先要做的事是對房屋的結構、外形做細緻的構思,為了使之定量化,你還需設計許多圖紙,當然這些圖紙只能內行人讀懂,虛擬現實可以把這種構思變成看得見的虛擬物體和環境,使以往只能藉助傳統的設計模式提升到數位化的即看即所得的完美境界,大大提高了設計和規劃的質量與效率。運用虛擬現實技術,設計者可以完全按照自己的構思去構建裝飾“虛擬”的房間,並可以任意變換自己在房間中的位置,去觀察設計的效果,直到滿意為止。既節約了時間,又節省了做模型的費用。
虛擬現實動畫在房產開發中的套用
隨著房地產業競爭的加劇,傳統的展示手段如平面圖、表現圖、沙盤、樣板房等已經遠遠無法滿足消費者的需要。因此敏銳把握市場動向,果斷啟用最新的技術並迅速轉化 為生產力,方可以領先一步,擊潰競爭對手。虛擬現實技術是集影視廣告、動畫、多媒體、網路科技於一身的最新型的房地產行銷方式,在國內的廣州、上海、北京等大城市,國外的加拿大、美國等經濟和科技發達的國家都非常熱門,是當今房地產行業一個綜合實力的象徵和標誌,其最主要的核心是房地產銷售!同時在房地產開發中的其他重要環節包括申報、審批、設計、宣傳等方面都有著非常迫切的需求。
虛擬現實動畫在工業仿真中的套用
當今世界工業已經發生了巨大的變化,大規模人海戰術早已不再適應工業的發展,先進科學技術的套用顯現出巨大的威力,特別是虛擬現實技術的套用正對工業進行著一場前所未有的革命。虛擬現實已經被世界上一些大型企業廣泛地套用到工業的各個環節,對企業提高開發效率,加強數據採集、分析、處理能力,減少決策失誤,降低企業風險起到了重要的作用。虛擬現實技術的引入,將使工業設計的手段和思想發生質的飛躍,更加符合社會發展的需要,可以說在工業設計中套用虛擬現實技術是可行且必要的。
虛擬現實動畫在軍事模擬中的套用
虛擬戰場環境 採用虛擬現實技術使受訓者在視覺和聽覺上真實體驗戰場環境、熟悉將作戰區域的環境特徵。用戶通過必要的設備可與虛擬環境中的對象進行互動作用、相互影響,從而產生“沉浸”於等同真實環境的感受和體驗。虛擬戰場環境的實現方法可通過相應的三維戰場環境圖形圖像庫,包括作戰背景、戰地場景、各種武器裝備和作戰人員等。通過背景生成與圖像合成創造一種險象環生、幾近真實的立體戰場環境。使演練者“真正”進入形象逼真的戰場。從而可以增強受訓者的臨場感覺,大大提高訓練質量。
單兵模擬訓練與評判在該套用系統中導調人員可設定不同的戰場背景,給出不同的情況,而受訓者則通過立體頭盔、數據服、和數據手套或三維滑鼠操作感測裝置可做出或選擇相應的戰術動作,輸入不同的處置方案,體驗不同的作戰效果,進而像參加實戰一樣,鍛鍊和提高技戰術水平、快速反應能力和心理承受力。與常規的訓練方式相比較,虛擬現實訓練具有環境逼真,“身臨其境”感強、場景多變,訓練針對性強和安全經濟,可控制性強等特點。如美空軍用虛擬現實技術研製的飛行訓練模擬器,能產生視覺控制,能處理三維實時互動圖形,且有圖形以外的聲音和觸感,不但能以正常方式操縱和控制飛行器,還能處理虛擬現實中飛機以外的各種情況,如氣球的威脅、飛彈的發射軌跡等。
諸軍種聯合虛擬演習建立一個“虛擬戰場”,使參戰雙方同處其中,根據虛擬環境中的各種情況及其變化,實施“真實的”對抗演習。在這樣的虛擬作戰環境中,可以使眾多軍事單位參與到作戰模擬來中,而不受地域的限制,可大大提高了戰役訓練的效益;還可以評估武器系統的總體性能,啟發新的作戰思想。
虛擬軍事演習系統可以任意增加聯合演習的次數。這樣便於作戰方案與理論的研究。傳統的實兵演習周期長、耗費大,如果藉助虛擬軍事演習系統進行訓練,就可以較小的代價、較短的時間實施大規模戰區、戰略級演習,並可通過多次演習或一次演習多種方案,發現、解決實戰中可能出現的問題。 進行指揮員訓練利用虛擬現實技術,根據偵察情況資料合成出戰場全景圖,讓受訓指揮員通過感測裝置觀察雙方兵力部署和戰場情況,以便判斷敵情,定下正確決心。例如美國海軍開發的“虛擬艦艇作戰指揮中心”就能逼真地模擬與真的艦艇作戰指揮中心幾乎完全相似的環境,生動的視覺、聽覺和觸覺效果,使受訓軍官沉浸於“真實的”戰場之中。虛擬現實技術可以使相距幾千公里的士兵與作戰指揮人員在網路上進行對抗作戰演習和訓練,效果如同在真實的戰場上一樣。
虛擬現實動畫在文物古蹟中的套用
利用虛擬現實技術,結合網路技術,可以將文物的展示、保護提高到一個嶄新的階段。首先表現在將文物實體通過影像數據採集手段,建立起實物三維或模型資料庫,保存文物原有的各項型式數據和空間關係等重要資源,實現瀕危文物資源的科學、高精度和永久的保存。 其次利用這些技術來提高文物修復的精度和預先判斷、選取將要採用的保護手段,同時可以縮短修復工期。 通過計算機網路來整合統一大範圍內的文物資源,並且通過網路在大範圍內來利用虛擬技術更加全面、生動、逼真地展示文物,從而使文物脫離地域限制,實現資源共享,真正成為全人類可以“擁有”的文化遺產。使用虛擬現實技術可以推動文博行業更快地進入資訊時代,實現文物展示和保護的現代化。
虛擬現實動畫在遊戲中的套用
三維遊戲既是虛擬現實技術重要的套用方向之一,也為虛擬現實技術的快速發展起了巨大的需求牽引作用。 儘管存在眾多的技術難題,虛擬現實技術在競爭激烈的遊戲市場中還是得到了越來越多的重視和套用。可以說,電腦遊戲自產生以來,一直都在朝著虛擬現實的方向發展,虛擬現實技術發展的最終目標已經成為三維遊戲工作者的崇高追求。從最初的文字MUD遊戲,到二維遊戲、三維遊戲,再到網路三維遊戲,遊戲在保持其實時性和互動性的同時,逼真度和沉浸感正在一步步地提高和加強。我們相信,隨著三維技術的快速發展和軟硬體技術的不斷進步,在不遠的將來,真正意義上的虛擬現實遊戲必將為人類娛樂、教育和經濟發展做出新的更大的貢獻。
在Web3d/產品/靜物展示中的套用
Web3D主要有四類運用方向:商業、教育、娛樂、和虛擬社區。對企業和電子商務 三維的表現形式,能夠全方位的展現一個物體,具有二維平面圖象不可比擬的優勢。企業將他們的產品發布成網上三維的形式,能夠展現出產品外形的方方面面,加上互動操作,演示產品的功能和使用操作,充分利用網際網路高速迅捷的傳播優勢來推廣公司的產品。對於網上電子商務,將銷售產品展示做成線上三維的形式,顧客通過對之進行觀察和操作能夠對產品有更加全面的認識了解,決定購買的幾率必將大幅增加,為銷售者帶來更多的利潤。
對教育業現今的教學方式,不再是單純的依靠書本、教師授課的形式。計算機輔助教學(CAI)的引入,彌補了傳統教學所不能達到的許多方面。在表現一些空間立體化的知識,如原子、分子的結構、分子的結合過程、機械的運動時,三維的展現形式必然使學習過程形象話,學生更容易接受和掌握。許多實際經驗告訴我們,做比聽和說更能接受更多的信息。使用具有互動功能的3D課件,學生可以在實際的動手操作中得到更深的體會。
對計算機遠程教育系統而言,引入Web3D內容必將達到很好的線上教育效果。 對娛樂遊戲業娛樂遊戲業永遠是一個不衰的市場。現今,互連網上已不是單一靜止的世界,動態HTML、flash動畫、流式音視頻,使整個互連網呈現生機黯然。動感的頁面較之靜態頁面更能吸引更多的瀏覽者。三維的引入,必將造成新一輪的視覺衝擊,使網頁的訪問量提升。娛樂站點可以在頁面上建立三維虛擬主持這樣的角色來吸引瀏覽者。遊戲公司除了在光碟上發布3D遊戲外,現在可以在網路環境中運行線上三維遊戲。利用互連網路的優勢,客群和覆蓋面得到迅速擴張。
對虛擬現實展示與虛擬社區使用Web3D實現網路上的VR展示,只須構建一個三維場景,人以第一視角在其中穿行。場景和控制者之間能產生互動,加之高質量的生成畫面使人產生身臨其境的感覺。對於象虛擬展廳、建築房地產虛擬漫遊展示,提供了解決方案。如果是建立一個多用戶而且可以互相傳遞信息的環境,也就形成了所謂的虛擬社區。
虛擬現實動畫在道路橋樑中的套用
城市規劃一直是對全新的可視化技術需求最為迫切的領域之一,虛擬現實技術可以廣泛的套用在城市規劃的各個方面,並帶來切實且可觀的利益。 虛擬現實技術在道路橋樑套用現狀在高速公路與橋樑建設中虛擬現實技術也得到了套用。由於道路橋樑需要同時處理大量的三維模型與紋理數據,導致這種形勢需要很高的計算機性能作為後台支持,但隨著近些年來計算機軟硬體技術的提高,一些原有的技術瓶頸得到了解決,使虛擬現實的套用達到了前所未有的發展 。
在我國,許多學院和機構也一直在從事這方面的研究與套用。三維虛擬現實平台軟體,可廣泛的套用於橋樑道路設計等行業。該軟體適用性強、操作簡單、功能強大、高度可視化、所見即所得,他的出現將給正在發展的VR產業提示入新的活力。 虛擬現實技術在道路橋樑方面的套用虛擬現實技術在高速公路和橋樑建設方面有著非常廣闊的套用前景,可由後台置入穩定的資料庫信息,便於客群對各項技術指標進行實時的查詢,周邊再輔以多種媒體信息,如工程背景介紹,標段概況,技術數據,截面等,電子地圖,聲音、圖像、動畫,並與核心的虛擬技術產生互動,從而實現演示場景中的導航、定位與背景信息介紹等諸多實用、便捷的功能。
虛擬現實動畫在地理中的套用
套用虛擬現實技術,將三維地面模型、正射影像和城市街道、建築物及市政設施的三維立體模型融合在一起,再現城市建築及街區景觀,用戶在顯示屏上可以很直觀地看到生動逼真的城市街道景觀,可以進行諸如查詢、量測、漫遊、飛行瀏覽等一系列操作,滿足數字城市技術由二維GIS向三維虛擬現實的可視化發展需要,為城建規劃、社區服務、物業管理、消防安全、旅遊交通等提供可視化空間地理信息服務。
電子地圖技術是集地理信息系統技術、數字製圖技術、多媒體技術和虛擬現實技術等多項現代技術為一體的綜合技術。電子地圖是一種以可視化的數字地圖為背景,用文本、照片、圖表、聲音、動畫、視頻等多媒體為表現手段展示城市、企業、旅遊景點等區域綜合面貌的現代信息產品,它可以存貯於計算機外存,以唯讀光碟、網路等形式傳播,以桌面計算機或觸控螢幕計算機等形式提供大眾使用。由於電子地圖產品結合了數字製圖技術的可視化功能、數據查詢與分析功能以及多媒體技術和虛擬現實技術的信息表現手段,加上現代電子傳播技術的作用,它一出現就贏得了社會的廣泛興趣!
虛擬現實動畫在教育中的套用
虛擬現實套用於教育是教育技術發展的一個飛躍。它營造了“自主學習”的環境,由傳統的“以教促學”的學習方式代之為學習者通過自身與信息環境的相互作用來得到知識、技能的新型學習方式。
它主要具體套用在以下幾個方面
1科技研究
當前許多高校都在積極研究虛擬現實技術及其套用,並相繼建起了虛擬現實與系統仿真的研究室,將科研成果迅速轉化實用技術,如北京航天航空大學在分散式飛行模擬方面的套用;浙江大學在建築方面進行虛擬規劃、虛擬設計的套用;哈爾濱工業大學在人機互動方面的套用;清華大學對臨場感的研究等都頗具特色。有的研究室甚至已經具備獨立承接大型虛擬現實項目的實力。 虛擬學習環境虛擬現實技術能夠為學生提供生動、逼真的學習環境,如建造人體模型、電腦太空旅行、化合物分子結構顯示等,在廣泛的科目領域提供無限的虛擬體驗,從而加速和鞏固學生學習知識的過程。親身去經歷、親身去感受比空洞抽象的說教更具說服力,主動地去互動與被動的灌輸,有本質的差別。 虛擬實驗利用虛擬現實技術,可以建立各種虛擬實驗室,如地理、物理、化學、生物實驗室等等,擁有傳統實驗室難以比擬的優勢:
1、節省成本通常我們由於設備、場地、經費等硬體的限制。許多實驗都無法進行。而利用虛擬現實系統,學生足不出戶便可以做各種實驗,獲得與真實實驗一樣的體會。在保證教學效果的前提下,極大的節省了成本。
2、規避風險真實實驗或操作往往會帶來各種危險,利用虛擬現實技術進行虛擬實驗,學生在虛擬實驗環境中,可以放心地去做各種危險的實驗。例如:虛擬的飛機駕駛教學系統,可免除學員操作失誤而造成飛機墜毀的嚴重事故。
3、打破空間、時間的限制利用虛擬現實技術,可以徹底打破時間與空間的限制。大到宇宙天體,小至原子粒子,學生都可以進入這些物體的內部進行觀察。一些需要幾十年甚至上百年才能觀察的變化過程,通過虛擬現實技術,可以在很短的時間內呈現給學生觀察。例如,生物中的孟德爾遺傳定律,用果蠅做實驗往往要幾個月的時間,而虛擬技術在一堂課內就可以實現。
2虛擬實訓基地:
利用虛擬現實技術建立起來的虛擬實訓基地,其“設備”與“部件”多是虛擬的,可以根據隨時生成新的設備。教學內容可以不斷更新,使實踐訓練及時跟上技術的發展。同時,虛擬現實的沉浸性和互動性,使學生能夠在虛擬的學習環境中扮演一個角色,全身心地投入到學習環境中去,這非常有利於學生的技能訓練。包括軍事作戰技能、外科手術技能、教學技能、體育技能、汽車駕駛技能、果樹栽培技、電器維修技能等各種職業技能的訓練,由於虛擬的訓練系統無任何危險,學生可以不厭其煩地反覆練習,直至掌握操作技能為止。例如:在虛擬的飛機駕駛訓練系統中,學員可以反覆操作控制設備,學習在各種天氣情況下駕駛飛機起飛、降落,通過反覆訓練,達到熟練掌握駕駛技術的目的。
3虛擬仿真校園:
教育部在一系列相關的檔案中,多次涉及到了虛擬校園,闡明了虛擬校園的地位和作用。虛擬校園也是虛擬現實技術在教育培訓中最早的具體套用,它由淺至深有三個套用層面,分別適應學校不同程度的需求:簡單的虛擬我們的校園環境供遊客瀏覽 基於教學、教務、校園生活,功能相對完整的三維可視化虛擬校園 以學員為中心,加入一系列人性化的功能,以虛擬現實技術作為遠程教育基礎平台 虛擬遠程教育虛擬現實可為高校擴大招生後設定的分校和遠程教育教學點提供可移動的電子教學場所,通過互動式遠程教學的課程目錄和網站,由區域網路工具作校園網站的連結,可對各個終端提供開放性的、遠距離的持續教育,還可為社會提供新技術和高等職業培訓的機會,創造更大的經濟效益與社會效益。隨著虛擬現實技術的不斷發展和完善,以及硬體設備價格的不斷降低,我們相信,虛擬現實技術以其自身強大的教學優勢和潛力,將會逐漸受到教育工作者的重視和青睞,最終在教育培訓領域廣泛套用並發揮其重要作用。
虛擬現實動畫在虛擬演播室中的套用
隨著計算機網路和三維圖形軟體等先進信息技術的發展,電視節目製作方式發生了很大的變化。視覺和聽覺效果以及人類的思維都可以靠虛擬現實技術來實現。它升華了人類的邏輯思維。虛擬演播室則是虛擬現實技術與人類思維相結合在電視節目製作中的具體體現。虛擬演播系統的主要優點是它能夠更有效地表達新聞信息,增強信息的感染力和互動性。傳統的演播室對節目製作的限制較多。虛擬演播系統製作的布景是合乎比例的立體設計,當攝像機移動時,虛擬的布景與前景畫面都會出現相應的變化,從而增加了節目的真實感。用虛擬場景在很多方面成本效益顯著。如它具有及時更換場景的能力,在演播室布景製作中節約經費。不必移動和保留景物,因此可減輕對雇員的需求壓力。對於單集片,虛擬製作不會顯出很大的經濟效益,但在使用背景和攝像機位置不變的系列節目中它可以節約大量的資金。另外,虛擬演播室具有製作優勢。當考慮節目格局時,製作人員的選擇餘地大,他們不必過於受場景限制。對於同一節目可以不用同一演播室,因為背景可以存入磁碟。它可以充分發揮創作人員的藝術創造力與想像力,利用現有的多種三維動畫軟體,創作出高質量的背景。
虛擬現實動畫在水文地質研究中的套用
虛擬現實技術是利用計算機生成的虛擬環境逼真地模擬人在自然環境中的視覺、聽覺、運動等行為的人機界面的新技術。利用虛擬現實技術沉浸感、與計算機的互動功能和實時表現功能,建立相關的地質、水文地質模型和專業模型,進而實現對含水層結構、地下水流、地下水質和環境地質問題(例如地面沉降、海水入侵、土壤沙漠化、鹽漬化、沼澤化及區域降落漏斗擴展趨勢)的虛擬表達。具體實現步驟包括建立虛擬現實資料庫、三維地質模型、地下水水流模型、專業模型和實時預測模型。
關鍵技術
虛擬現實是多種技術的綜合,包括實時三維計算機圖形技術,廣角(寬視野)立體顯示技術,對觀察者頭、眼和手的跟蹤技術,以及觸覺/力覺反饋、立體聲、網路傳輸、語音輸入輸出技術等。下面對這些技術分別加以說明。
實時三維計算機圖形技術
相比較而言,利用計算機模型產生圖形圖像並不是太難的事情。如果有足夠準確的模型,又有足夠的時間,我們就可以生成不同光照條件下各種物體的精確圖像,但是這裡的關鍵是實時。例如在飛行模擬系統中,圖像的刷新相當重要,同時對圖像質量的要求也很高,再加上非常複雜的虛擬環境,問題就變得相當困難。
廣角(寬視野)的立體顯示
人看周圍的世界時,由於兩隻眼睛的位置不同,得到的圖像略有不同,這些圖像在腦子裡融合起來,就形成了一個關於周圍世界的整體景象,這個景象中包括了距離遠近的信息。當然,距離信息也可以通過其他方法獲得,例如眼睛焦距的遠近、物體大小的比較等。
在VR系統中,雙目立體視覺起了很大作用。用戶的兩隻眼睛看到的不同圖像是分別產生的,顯示在不同的顯示器上。有的系統採用單個顯示器,但用戶帶上特殊的眼鏡後,一隻眼睛只能看到奇數幀圖像,另一隻眼睛只能看到偶數幀圖像,奇、偶幀之間的不同也就是視差就產生了立體感。
用戶(頭、眼)的跟蹤:在人造環境中,每個物體相對於系統的坐標系都有一個位置與姿態,而用戶也是如此。用戶看到的景象是由用戶的位置和頭(眼)的方向來確定的。
跟蹤頭部運動的虛擬現實頭套:在傳統的計算機圖形技術中,視場的改變是通過滑鼠或鍵盤來實現的,用戶的視覺系統和運動感知系統是分離的,而利用頭部跟蹤來改變圖像的視角,用戶的視覺系統和運動感知系統之間就可以聯繫起來,感覺更逼真。另一個優點是,用戶不僅可以通過雙目立體視覺去認識環境,而且可以通過頭部的運動去觀察環境。
在用戶與計算機的互動中,鍵盤和滑鼠是目前最常用的工具,但對於三維空間來說,它們都不太適合。在三維空間中因為有六個自由度,我們很難找出比較直觀的辦法把滑鼠的平面運動映射成三維空間的任意運動。現在,已經有一些設備可以提供六個自由度,如3Space數位化儀和SpaceBall空間球等。另外一些性能比較優異的設備是數據手套和數據衣。
立體聲
人能夠很好地判定聲源的方向。在水平方向上,我們靠聲音的相位差及強度的差別來確定聲音的方向,因為聲音到達兩隻耳朵的時間或距離有所不同。常見的立體聲效果就是靠左右耳聽到在不同位置錄製的不同聲音來實現的,所以會有一種方向感。現實生活里,當頭部轉動時,聽到的聲音的方向就會改變。但目前在VR系統中,聲音的方向與用戶頭部的運動無關。
觸覺與力覺反饋
在一個VR系統中,用戶可以看到一個虛擬的杯子。你可以設法去抓住它,但是你的手沒有真正接觸杯子的感覺,並有可能穿過虛擬杯子的“表面”,而這在現實生活中是不可能的。解決這一問題的常用裝置是在手套內層安裝一些可以振動的觸點來模擬觸覺。
語音輸入輸出
在VR系統中,語音的輸入輸出也很重要。這就要求虛擬環境能聽懂人的語言,並能與人實時互動。而讓計算機識別人的語音是相當困難的,因為語音信號和自然語言信號有其“多邊性”和複雜性。例如,連續語音中詞與詞之間沒有明顯的停頓,同一詞、同一字的發音受前後詞、字的影響,不僅不同人說同一詞會有所不同,就是同一人發音也會受到心理、生理和環境的影響而有所不同。
使用人的自然語言作為計算機輸入目前有兩個問題,首先是效率問題,為便於計算機理解,輸入的語音可能會相當囉嗦。其次是正確性問題,計算機理解語音的方法是對比匹配,而沒有人的智慧型。