《基於視覺注意的手勢互動技術研究》是依託中山大學，由武匯岳擔任項目負責人的青年科學基金項目。
基本介紹
- 中文名：基於視覺注意的手勢互動技術研究
- 項目類別：青年科學基金項目
- 項目負責人：武匯岳
- 依託單位：中山大學
中文摘要,結題摘要,
中文摘要
視覺手勢互動技術是自然用戶界面的主流方式和熱點問題之一。針對目前視覺手勢互動中存在的Midas Touch瓶頸問題，從視覺注意感知模型、手勢識別與互動技術以及套用驗證幾方面展開研究:（1）基於認知心理學what-where兩條通路理論，構建融合自頂向下和自底向上注意的層次並行感知模型，以此來影響視覺注意，將注意吸引到顯著的手勢動作區域，為空間連續動態手勢識別提供高層的理論指導;（2）基於視覺選擇性注意、預注意和集中注意機制，提出一種魯棒的空間連續動態手勢識別方法，為視覺手勢互動技術設計提供基礎算法支撐和技術準備;（3）在總結現有視覺手勢互動特徵的基礎上，面向互動式數位電視，設計出一套基於精確互動任務的視覺手勢互動技術，提高視覺手勢執行互動任務的能力。本項目對視覺手勢互動理論的完善、創新性方法和技術的研究以及在各個領域的套用推廣具有重要的理論和套用價值。
結題摘要
視覺手勢互動技術是自然用戶界面的主流方式和熱點問題之一。針對目前視覺手勢互動中存在的“Midas Touch”瓶頸問題，從視覺注意感知模型、手勢識別與互動技術、平台和原型系統開發以及實驗設計和可用性評估幾方面展開研究:(1)基於認知心理學what-where兩條通路理論，構建了一個融合自頂向下(top-down)和自底向上(bottom-up)注意的層次並行感知模型，以此來影響視覺注意，將計算資源分配到顯著的手勢動作區域，為空間連續動態手勢識別提供高層的理論指導;(2)將整個視頻處理過程劃分為選擇性注意(特徵提取和特徵整合)、預注意(為目標識別提供自頂向下的先驗知識)和集中注意(自底向上的時空分割和模式識別)三個主要模組；並為三個主要模組設計開發了相應的算法和實現技術;(3)提出了一套以用戶為中心的手勢設計開發方法，並給出了系統的論證和實驗結果;(4)開發了一個視覺手勢識別工具箱(Visual Gesture Recognition Toolkit, VGRT),並開發了一套手勢互動技術，包括單/雙手識別，靜/動態手勢識別，離線/線上手勢識別等多種類型。開發了一系列手勢互動系統原型。本項目對視覺手勢互動理論的完善、創新性方法和技術的研究以及在各個領域的套用推廣具有重要的理論和套用價值。
