基於視頻內容重組的顯示適配技術研究

《基於視頻內容重組的顯示適配技術研究》是依託南京大學，由任桐煒擔任項目負責人的青年科學基金項目。

基本介紹

• 中文名：基於視頻內容重組的顯示適配技術研究
• 項目類別：青年科學基金項目
• 項目負責人：任桐煒
• 依託單位：南京大學

項目摘要

隨著個性化視頻消費成為趨勢，移動設備逐步成為觀看視頻的重要途徑。視頻顯示適配技術通過自動改編視頻內容來適應不同設備的顯示需求。本項目緊扣視頻顯示適配中構建自動支持不同顯示需求的視頻內容組織形式這一關鍵科學問題，凝鍊出內容相關的表示方式、用戶感知驅動的改編策略和增量式的改編結果傳輸方案三項研究內容，重點研究基於曲面四稜柱的視頻內容表示、多能量模板和質量評估指導的視頻內容改編和內容與位置信息分離的增量式視頻內容傳輸作為解決方案，並通過建設原型系統來驗證研究成果，解決實用化推廣中的關鍵技術障礙。本項目將會在面向顯示適配的視頻內容組織形式上取得突破，推動視頻顯示適配和相關研究領域的發展。本項目的研究成果可以服務於三網融合等數字內容產業需求，提高個性化視頻消費的服務質量，具有很大的社會經濟效益和推廣套用前景。

結題摘要

項目組成員在國家自然科學基金青年項目“基於視頻內容重組的顯示適配技術研究（61202320）”的研究資助下，重點圍繞顯示設備螢幕多樣化下的視頻內容自適應適配問題，視頻顯示適配的關鍵技術研究、整體解決方案構建與驗證及其相關領域的推廣套用開展研究。項目組成員對深度、位置等因素在顯著性分析中的作用進行了全面分析，提出了基於深度、位置、多特徵融合的一系列顯著物體檢測方法，並採用自適應三閾值最佳化顯著物體分割效果；在此基礎上，項目組成員將視頻幀內容改編規約為區域變形和遮擋的最佳化求解來減少適配結果中的人工處理痕跡，並通過基於軟匹配的物體跟蹤來提升整個視頻顯示適配結果的時空一致性。基於上述視頻顯示適配關鍵技術研究，項目組成員將顯示適配方法和顯示適配結果的質量評估相結合，以期提供視頻顯示適配處理的整體解決方案，提出了基於多標註多示例學習的適配方法自動選擇機制和質量評估指導下的多種顯示適配方法融合策略，並在原型系統驗證中取得較好的適配效果。此外，項目組成員還積極對視頻顯示適配中的關鍵技術進行推廣運用，在視頻深度估計、物體位置預估、立體圖像互動式分割、立體物體檢索等方面取得了一系列的研究進展。項目研究成果發表於多媒體和計算機視覺領域的高水平刊物，包括ICCV、ICME、ICIP等會議和SPIC、MTAP、MMSJ等期刊，總計20篇（SCIE檢索3篇，EI檢索16篇），並有2篇論文分別獲得國際會議ICIMCS 2014和PCM 2015的最佳論文提名獎。項目組成員還申請國家發明專利3項，登記軟體著作權1項。