《基於動態圖形模型和音視頻的情感識別方法的研究》是依託江蘇大學，由詹永照擔任項目負責人的面上項目。
基本介紹
- 中文名：基於動態圖形模型和音視頻的情感識別方法的研究
- 項目類別：面上項目
- 項目負責人：詹永照
- 依託單位：江蘇大學
- 批准號：60673190
- 申請代碼：F0209
- 負責人職稱：教授
- 研究期限：2007-01-01 至 2009-12-31
- 支持經費：23（萬元）
項目摘要
本項目旨在利用動態圖形模型允許觀察值預設和隱狀態丟失的特性，解決在視頻丟幀、音頻干擾的情況下準確、實時識別表演者情感的問題。本項目主要研究基於視頻的混合式情感特徵提取方法，針對面部表情的不同單元採取不同方法提取情感特徵，在保留情感信息的前提下最大限度地降低情感特徵的數據維度；研究基於回歸分析和一致性選擇相結合的實時語音情感特徵提取方法，結合實時語音特點，考慮說話的時長、環境及不同說話者等相關因素，提取較現有聲學特徵豐富的語音情感信息；研究構建允許觀察值和狀態預設的動態圖形模型的一般方法，並用此方法構建二維嵌入式動態圖形模型，該模型能夠融合音視頻特徵，允許音頻信息干擾甚至丟失，允許視頻序列丟幀、視頻圖象中因臉部旋轉運動造成的表情關鍵區域丟失等情形，同時快速、準確地識別音視頻環境中表演者的情感類別。本項目的研究成果可套用於開發智慧型化、人性化的新型人機互動環境，將產生很好的經濟效益和社會效益。
