《基於唇動視覺特徵的話語內容識別方法研究》是依託北方工業大學，由魯遠耀擔任項目負責人的面上項目。
基本介紹
- 中文名：基於唇動視覺特徵的話語內容識別方法研究
- 項目類別：面上項目
- 項目負責人：魯遠耀
- 依託單位：北方工業大學
- 批准號：61571013
- 申請代碼：F0116
- 負責人職稱：教授
- 研究期限：2016-01-01 至 2019-12-31
- 支持經費：69（萬元）
項目摘要
基於唇動視覺特徵的話語內容識別，是利用人說話時嘴唇的視覺動態信息來挖掘和識別說話人話語內容的方法，是圖像處理和模式識別的一個前沿研究方向，具有很強的新穎性、前瞻性和挑戰性。傳統的基於音頻的語音識別在噪聲環境中或複雜背景下，識別性能會急劇下降。嘴唇運動的圖像序列包含有豐富且可挖掘的話語內容信息。項目首先通過對視頻圖像中說話人的嘴唇區域定位、唇部輪廓提取和跟蹤，實現嘴唇動作狀態的精確捕捉。其次對嘴唇區域圖像進行數據壓縮、特徵提取和信息挖掘，然後通過設計高效的分類器來對提取出的唇動視覺信息進行智慧型判決分類，以此實現對說話人話語內容的有效識別。最後構建一個基於唇動視覺特徵的話語內容識別系統，對話語內容識別理論和方法進行系統仿真、驗證和評估。本項目的順利開展，可在視覺圖像識別和理解技術領域提出新的研究方法和手段，為智慧型人機互動技術的進一步發展奠定理論和實踐基礎。
