上下文感知的人臉表情理解研究

《上下文感知的人臉表情理解研究》是依託北京航空航天大學，由薛雨麗擔任項目負責人的青年科學基金項目。

基本介紹

• 中文名：上下文感知的人臉表情理解研究
• 依託單位：北京航空航天大學
• 項目負責人：薛雨麗
• 項目類別：青年科學基金項目

項目摘要

人臉表情理解在人類的非語言交流中尤為重要，實現人機互動中的人臉表情自動理解對於提高人機情感互動智慧型具有十分重要的意義。人臉表情所能表達的信息極為豐富，國內外研究者大多直接將人臉表情簡單識別為高興、悲傷、驚訝、害怕、嫌惡和生氣等基本情感或多個面部動作單元，但未聯繫與人臉表情相關的上下文信息，仍未實現智慧型和有效的人臉表情理解，很難套用於實際。本課題提出上下文感知的人臉表情理解研究，對個性上下文感知的人臉表情理解、社交上下文感知的人臉表情理解和情感上下文感知的人臉表情理解進行創新性研究。擬解決上下文感知的人臉表情理解建模、人臉表情上下文感知方法、人臉表情學習和推理等關鍵問題。通過上下文感知彌補人臉表情識別的不足，實現對人臉表情的智慧型理解，將提高機器智慧型，早日實現和諧的人機互動。

結題摘要

人臉表情所能表達的信息極為豐富，一般將人臉表情與高興、悲傷、驚訝、害怕、嫌惡和生氣等基本情感相聯繫，或將人臉表情理解為多個面部動作單元的組合，這些方法都具有局限性，不能完全表達人臉表情的含義。感知人臉表情相關的上下文信息對於實現智慧型和有效的人臉表情理解具有重要意義。本課題進行了上下文感知的人臉表情理解研究，對個性上下文感知的人臉表情理解、社交上下文感知的人臉表情理解和情感上下文感知的人臉表情理解進行了創新性研究。本課題建立了個性表情資料庫、上下文相關的多模情感資料庫；提出了上下文感知的人臉表情理解模型；研究了多種人臉表情上下文感知方法，如個性上下文、光照上下文、個體面部差異上下文、文本互動上下文、Backchannel上下文、情感語音上下文、人臉非對稱性上下文等；提出了多種人臉表情特徵提取、識別、學習和推理等方法。發表論文11篇（其中SCI收錄5篇，EI收錄10篇，ISTP收錄1篇），申請發明專利4項（其中國際專利1項，2項已授權）。培養碩士生4 人，博士生1 人，博士後1 人。