3D互動手套

研究者研發3D式互動手套的初衷是幫助失去語言能力或有語言交流障礙的人“說話”,它讓傳統意義上不能講話的人發出聲音,但又不同於手語,因為使用者不必特意去學習手勢的含義。

基本介紹

  • 中文名:3D互動手套
  • 研發目的:讓人們用手勢唱歌
  • 設計原理:涉及人的思維活動的高級行為
  • 缺點:聲音還不夠擬人
研發目的,設計原理,缺點,

研發目的

3D互動手套
隨著研究的深入,科學家們將開發手套的音樂功能,從而讓人們用手勢唱歌。與人類優雅的聲音相比之下,其發音聲似電影復仇里黑武士的神秘聲音。

設計原理

有研究稱,手勢不僅由骨骼肌肉驅動,而且受人的信念、意識的驅使,是涉及人的思維活動的高級行為。在虛擬現實系統中,手是用戶模型中十分重要的動作與感知關係模型,而手勢則是3D互動任務和技術的手段。西尼·菲爾斯開發出“手套交談”系統,採用神經網路將用戶手勢轉換成手勢語言參數,通過語言合成器合成為語言輸出。3D互動式手套通過複製聲帶的每個動作發出電腦合成音,這是很複雜困難的過程,就好像通過打電話語音傳送郵件一樣。
3D互動手套
對於用戶來說,最大的困難挑戰就是分別學習左右手套的不同功能,兩隻手的不同手勢代表不同聲音片段,比如,右手握緊代表輔音、張開代表元音、左手控制音節的長短、右手抬起時代表高聲調、處於水平位置時是平聲調。右邊的手套象徵著開放和閉合的聲道,它包含運動感測器,通過手的運動來檢測佩戴者的開放和閉合聲音。而左手套則配備按鈕設施激活像“P”和“B”這種清輔音,元音是通過開放聲道發出的,輔音則是閉合聲道發出的,例如“sh”和“zz”。
3D互動式手套隨著手的移動,通過感測器定位,來改變音調,而音量是通過腳踏板設備來控制的,3D互動式手套是用八個人造聲帶壓縮鼻腔共鳴共同作用發出聲音。

缺點

這項技術現階段還存在不足,比如,說出帶有情感色彩的詞時,它的聲音還不夠擬人,而是像機器人講話,此外,學習如何操作需要大約100小時。

相關詞條

熱門詞條

聯絡我們