複雜場景視覺注意對象分割方法研究

《複雜場景視覺注意對象分割方法研究》是依託電子科技大學,由李宏亮擔任醒目負責人的面上項目。

基本介紹

• 中文名：複雜場景視覺注意對象分割方法研究
• 依託單位：電子科技大學
• 項目類別：面上項目
• 項目負責人：李宏亮

項目摘要

複雜場景分析是智慧型多媒體信息處理領域中的重要研究課題，而如何建立對象語義模型則是影響場景內容分析的關鍵因素。本項目針對目前複雜場景語義發現的研究現狀，提出了複雜場景的視覺注意對象的表示和分割新方法。由於利用了人的認知心理特性，並把該特性嵌入於高層視覺語義描述中，因此該方法比傳統的對象分割方法具有更好的語義特性。通過分析不同視覺特徵的顯著性表現,建立特徵視覺注意度等概念的形式化描述，構建符合視覺認知的局部和全局注意力模型。針對複雜場景對象存在的多樣性問題，建立具有視覺注意轉移特性的對象描述新方法。並在此基礎上，利用空域相關特性，構建潛在注意主題學習模型。建立底層特徵到注意對象的多層次表示方法，從而實現複雜場景語義內容的發現與分析。這一研究有望為解決複雜場景內容理解提供新的思路和理論依據。

結題摘要

複雜場景分析是智慧型多媒體信息處理領域中的重要研究課題，而如何建立對象語義模型則是影響場景內容分析的關鍵因素。本項目針對目前複雜場景語義發現的研究現狀，圍繞複雜場景的視覺注意對象分割方法開展了深入研究，主要研究內容包括：研究了不同特徵的視覺注意特性，探索了底層特徵在不同場景模型下的視覺感知特性，構建了感知相關的圖像描述。針對複雜場景對象存在的多樣性問題，建立具有視覺注意轉移特性的共顯著對象模型。結合圖像空域特徵與視覺注意機制的動態主題發現模型，探索了空域共生信息與局部注意力描述符的相關性，構建了語義相關的圖像標註與分類模型。最後，結合多層次格線圖模型，建立了多前景和多圖像組的分割策略，提出了多個基於分割傳播和馬爾可夫隨機場的圖像視頻對象精細化分割方法。在國內外一些著名的刊物和會議上發表38篇論文，其中包括SCI論文26篇，發表IEEE Transactions論文16篇。形成的關鍵技術申請國家發明專利12項，已授權3項。獲2015年國家傑出青年科學基金，帶領團隊入選2014“智慧型視覺信息處理”四川省青年科技創新研究團隊。作為主要骨幹獲得教育部高等學校學科“可視媒體信號與信息處理”創新引智基地（即“111計畫”）。在人才培養方面，指導的博士榮獲2016年度中國電子學會優秀博士學位論文提名獎，ACCV 2014最佳學生論文榮譽提名獎。在學術交流方面，先後擔任了2014 年在成都舉行的IEEE 多媒體會議和博覽會（ICME2014）本地執行主席。以及2016 IEEE 視覺通信和圖像處理會議(VCIP 2016)大會程式委員會聯席主席。